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ПРЕДИСЛОВИЕ 

Понятие «алгоритм» давно уже стало привычным не 
только для математиков: оно является концептуальной 
основой разнообразных процессов обработки информации; 
именно наличие соответствующих алгоритмов и обеспечи¬ 
вает возможность автоматизации таких процессов. Вместе 
с математической логикой теория алгоритмов образует тео¬ 
ретический фундамент современных вычислительных наук 
(см. [Семенов, Успенский, 1986] х )). 

Не всегда достаточно отчетливо осознается, однако, что 
само слово алгоритм содержит в своем составе преобразо¬ 
ванное географическое название, а именно слово Хорезм. 
Термин «алгоритм» обязан своим происхождением великому 
ученому средневекового Востока, чье имя — Мухаммад 
ибн Муса ал-Хорезми (причем «ал-Хорезми» означает «Хо¬ 
резмиец»). Он жил приблизительно о 783 по 850 гг., и 1983 г. 
был выбран, чтобы отметить 1200-летие со дня его рожде¬ 
ния. Его краткая биография, составленная в X в., начи¬ 
нается так (цитируем по [Булгаков, Розенфельд, Ахмедов, 
1983, с. 8]): «Ал-Хорезми. Имя его — Мухаммад ибн Муса, 
а происхождение из Хорезма». (Ранее писали аль- Хорезми.) 

По латинским переложениям написанного на арабском 
языке арифметического трактата ал-Хорезми 2 ) средне¬ 
вековая Европа знакомилась с индийской позиционной 
системой счисления и с искусством счета в этой систе¬ 
ме 3 ). В латинских названиях составленных в XII в. из- 

1 ) В названии этой статьи математическая логика трактуется в 
широком смысле, включающем в себя и собственно математическую 
логику (понимаемую как теория формализованных языков), и теорию 
алгоритмов. 

4 ) Русский перевод-этого трактата (с латинской рукописи, арабская 
не сохранилась) помещен в [Хорезми, 1964, с. 9—24] и в [Хорезми, 
1983, с. 5—18]. 

3 ) Например, с алгоритмом сложения «столбиком» — см. формули¬ 
ровку этого алгоритма в [Хорезми, 1964, с. 13] или в [Хорезми, 1983, 
с. 9—10] (соответствующий текст воспроизведен также а [Юшкевич, 
1976, с. 51]). 
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ложений трудов ал-Хорезми его имя транскрибировалось 
как аіскошті или аІ§огізті, а относящийся к тому же веку 
латинский перевод его арифметического трактата начинал¬ 
ся словами «Оіхіі а1§огІ2ші», т. е. «Сказал ал-Хорезми». 
Отсюда и пошло слово «алгоритм» — сначала для обозна¬ 
чения десятичной позиционной арифметики и алгоритмов 
цифровых вычислений (т. е. первых алгоритмических про¬ 
цедур, имеющих дело с символами: ведь до того считали на 
счетной доске — абаке), а затем для обозначения произ¬ 
вольных алгоритмов. 

Крупнейший американский специалист по программиро¬ 
ванию Д. Э. Кнут так начинает первую главу своей много¬ 
томной монографии «ТНе агі оі согприіег рго§гаштіп§» (ци¬ 
тируем по русскому изданию [Кнут, 1968, с. 25]): «Поня¬ 
тие алгоритма является основным при составлении любого 
вида программ для ЭВМ, и поэтому мы начнем с тщатель¬ 
ного анализа этого понятия. Само по себе слово «алгоритм» 
(а1§огііЬт) очень интересно: на первый взгляд может по¬ 
казаться, будто кто-то намеревался написать слово «лога¬ 
рифм» (1о§агііЬт), но перепутал порядок первых четырех 
букв. [...Юно произошло от имени автора известного араб¬ 
ского учебника по математике — АЬи Ла’Іаг МоНаттесі 
іЬп Мйза аІ-КНоѵгёгігті (около 825 г.), означающего «Отец 
Джафара 1 ) Магомет, сын Моисея, уроженец Ховаризма». 
В настоящее время Ховаризм — это небольшой советский 
город Хива». К приведенной цитате уместно сделать два 
замечания: 1) принятое русское название «Ховаризма» — 
Хорезм, 2) Хива—это не Хорезм (Ховаризм), а город, рас¬ 
положенный в Хорезмском оазисе; с 1920 по 1923 гг.— сто¬ 
лица Хорезмской Народной Советской Республики, с 1923 
по 1924 гг.— столица Хорезмской Советской Социалисти¬ 
ческой Республики, ныне — районный центр Хорезмской 
области Узбекской ССР. 

Современная Хорезмская область Узбекистана (област¬ 
ной центр — город Ургенч) является естественной наслед¬ 
ницей древнего Хорезма, осознаваемого как колыбель по¬ 
нятия алгоритма. Казалось естественным, что именно на 
этой земле должно произойти обсуждение основных проб¬ 
лем, связанных с алгоритмами. Разумеется, чтобы идея об 
организации такого обсуждения стала реальностью, была 
необходима соответствующая инициатива. Такую инициа- 

*) Другие источники именуют ал-Хорезми отцом Абдаллаха, а 
наиболее ранние источники вовсе не содержат указания, чей он отец 
(см. [Булгаков, Розенфельд, Ахмедов, 1983, с. 9]) — В. У., А. С. 
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тиву взяли на себя уже упомянутый Доналд Эрвин. Кнут и 
Андрей Петрович Ершов. Осенью 1978 г. они послали 
сорока своим коллегам из одиннадцати стран мира письмо, 
в котором писали- 

«Не так давно среди некоторых математиков и програм¬ 
мистов (к ним относятся и авторы этого письма) возникла 
идея осуществления своего рода научного паломничества 
к местам рождения и юности Аль-Хорезми, выдающегося 
математика средних веков, давшего свое имя слову «алго¬ 
ритм». Как подсказывает его имя, Аль-Хорезми произо¬ 
шел из Хорезмского оазиса, знаменитого очага цивилиза¬ 
ции, обогатившего человечество целой плеядой замеча¬ 
тельных философов, ученых и поэтов. Если же мы вспом¬ 
ним, что наиболее известные работы Аль-Хорезми не только 
привели к нашему слову «алгоритм», но и что слово «алгеб¬ 
ра» также обязано своим происхождением названию его 
главной работы [...], то станет ясно, что перспектива посе¬ 
щения этих мест будет источником особых чувств любого 
математика [...] Хотелось бы углубиться во взаимную дис¬ 
куссию по поводу фундаментальных проблем математики и 
вычислительного дела. Нам представляется, что природа 
пустыни и дыхание истории, свойственные месту проведе¬ 
ния конференции, представят нам особый шанс отвлечься 
от повседневной работы, окружающей нас дома, помогут 
сосредоточиться и придадут нашим размышлениям большую 
философскую глубину и дальнозоркость». 

Инициатива А. П. Ершова и Д. Э. Кнута была поддер¬ 
жана Академией наук СССР (и прежде всего ее Сибирским 
отделением) и Академией наук Узбекской ССР. В результате 
с 16 по 22 октября 1979 г. в городе Ургенче состоялся симпо¬ 
зиум «Алгоритмы в современной математике и ее приложе¬ 
ниях» при 26 советских и 13 зарубежных участниках. В день 
открытия симпозиума состоялась церемония закладки па¬ 
мятника ал-Хорезми. Рабочие заседания происходили 17, 
18, 21 и 22 сентября. Симпозиум завершился «алгоритмиче¬ 
ским вечером» с личными воспоминаниями одного из осново¬ 
положников теории вычислимых функций С. К. Клини на 
тему «К истории формирования понятия вычислимости». 
Дальнейшие подробности о симпозиуме см. в [Ершов А., 
Успенский, 1980], [Семенов, Успенский, 1980], [ЕршовА., 
1980], [Ершов А., Кнут, 1981, с. III—V и с. 466—487], 
[Ершов А., Кнут, 1982, ч. I, с. 4—7 и ч. 2, с. 309—315]. 

В процессе подготовки к симпозиуму один из его органи¬ 
заторов А. П. Ершов предложил, чтобы на симпозиуме был 



ПРЕДИСЛОВИЕ д 

сделан, как он писал одному из авторов в мае 1979 г., «за¬ 
главный доклад на тему что-нибудь вроде „Выдающиеся 
математические открытия, связанные с понятием алгорит- 
ма“». Цель доклада, по замыслу А. П. Ершова, состояла в 
том, чтобы «дать начальный заряд участникам, как эмоцио¬ 
нальный, так и познавательный»; следовало, отобрав не¬ 
сколько выдающихся результатов, «рассказать их сущность 
на пальцах, т. е. объяснить, а не доказать, и сделать к ним 
технический, методологический и философский коммента¬ 
рий». Такой доклад и был поручен авторам этой книги. 
Он состоялся 17 сентября 1979 г. под названием «Что дает 
теория алгоритмов (Основные открытия в области теории 
алгоритмов за последние полвека)». 

В своем докладе авторы попытались выделить те момен¬ 
ты в развитии теории алгоритмов, которые можно было бы 
квалифицировать как основные открытия. При этом в ка¬ 
честве открытия могло выступать и формирование понятия, 
и доказательство теоремы, и создание теории, и даже пофра- 
новка проблемы. Таких открытий было обнаружено 18 (Что 
дало повод Д. Э. Кнуту, председательствовавшему на до¬ 
кладе, заметить в шутку, что сам перечень 18 открытий 
образует самостоятельное, 19-е открытие). Одновременно 
была предпринята попытка очертить основные приложения, 
теории алгоритмов внутри теоретической и прикладной 
математики. Фактически за отведенные докладчикам полто¬ 
ра часа они успели рассказать только первую часть доклада, 
посвященную открытиям; вторая часть, посвященная при¬ 
ложениям, осталась представленной лишь в виде кратких 
тезисов на стенде. 

Расширенный текст обеих частей доклада был затем 
опубликован на английском языке в виде статьи [Успен¬ 
ский, Семенов, 1981] в томе [Ершов А., Кнут, 1981], содер¬ 
жащем материалы симпозиума. Переработанный и допол¬ 
ненный русский перевод [Успенский, Семенов, 1982] этого 
текста был, далее, опубликован в ротапринтном издании 
[Ершов А., Кнут, 1982]. 

Когда встал вопрос об издании ургенчского доклада в 
виде отдельной книги, авторы оказались перед нелегким 
выбором. С одной стороны, высшая правда, вероятно, состоя¬ 
ла бы в том, чтобы написать весь текст заново. С другой 
стороны, эта задача потребовала бы столько времени, что, 
скорее всего, стала бы неосуществимой, к тому же за это 
время сама теория алгоритмов, надо думать, шагнула бы 
далеко вперед. Прагматические соображения победили, и 
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если не учитывать Дополнение, книга была написана путем 
сравнительно незначительного изменения статьи [Успен¬ 
ский, Семенов, 1982]. Доводом в пользу такого решения 
послужило и то, что текст названной статьи оказался до¬ 
вольно «устойчивым» и у авторов не появилось ощущения, 
что в нем надо менять что-либо существенное — не говоря 
уже об изменении самого перечня основных открытий и ос¬ 
новных приложений. Поэтому поправки имели главной 
целью учесть некоторые последние достижения. Кроме то¬ 
го, в книге появилась новая тема, вынесенная в Допол¬ 
нение. 

Авторы — математики и писали свою книгу для мате¬ 
матиков (хотя старались не упустить и философские аспек¬ 
ты темы). Поэтому, возможно, несколько «за кадром» оста¬ 
лось следующее обстоятельство, которое они хотели бы 
сформулировать здесь в явном виде; понятие алгоритма яв¬ 
ляется не только центральным понятием теории алгорит¬ 
мов, не только одним из главных понятий математики вооб¬ 
ще, но одним из главных понятий современной науки. Более 
того, сегодня, с наступлением эры информатики, алгорит¬ 
мы становятся одним из важнейших факторой цивилизации. 

Многие достижения теории алгоритмов имеют общемате¬ 
матический и, возможно, общечеловеческий интерес. Ав¬ 
торы стремились поэтому к тому, чтобы данный текст был 
понятен любому математику, а не только специалисту в об¬ 
ласти теории алгоритмов. 



ОБОЗНАЧЕНИЯ И ТЕРМИНОЛОГИЯ 


N — натуральный ряд, т. е. множество всех натураль¬ 
ных чисел {0, 1, 2,...}; 

[^ + — множество всех положительных натуральных чи¬ 
сел {1, 2, 3,...}; 

О — множество всех рациональных чисел; 

<0 + — множество всех положительных рациональных 
чисел; 

Б* — множество всех слов в алфавите Б; 

2 — множество всех двоичных слов, т. е. 8 = {0, 1}*; 
й — множество всех бесконечных двоичных последо¬ 
вательностей; 

Л~Б означает, что при любых значениях переменных 
выражения А и В одновременно определены или не опреде¬ 
лены и, если определены, то имеют равные значения (при¬ 
мер: х — хсху—у истинно, а — ^ — ложно); 

х у 

А В означает, что существует такое натуральное число 

с, что неравенство Л^Б+с выполнено для всех значений 

переменных, для которых выражения Л и Б определены; 

Л Б означает, что существует такое натуральное число 

с, что неравенство Л^Б-с выполнено для всех значений 

переменных, для которых выражения Л и Б определены; 

Л ~ Б означает, что А В и В ~ Л; 

+ ' + + 

Л^Б означает, что ЛД.Б и БДЛ; 

Л —► Б или / есть \ означает, что область определе- 
отображение (функ- 1 ния / есть подмножество множе- 
ция) из Л и Б | ства Л, а множество значений / 
) есть подмножество множества Б; 
/ есть отображение \ означает, что область определе- 
множества X } ния / есть X; 

/ есть отображение \ означает, что множество значений 
на множество У ) / есть У ; 
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$Г (X, У )— множество всех функций из X в К; 

Сот (X, У) — множество всех вычислимых функций из 
X в У (см. §1.7); 

2 Ѵ — множество всех подмножеств множества ѴР ; 

Оеп(№) — множество всех породимых подмножеств 
множества ѴР (см. § 1.7); 

числовая функция — функция из № в М; 

числовое множество — подмножество множества №; 

словарная функция — функция из множества всех слов 
в некотором алфавите Б г в множество всех слов в некотором 
алфавите Б 2 ; 

словарное множество — некоторое множество слов в не¬ 
котором алфавите Б; 

решимая проблема — проблема, имеющая решение; 

3* — класс всех функций (в том числе всех предикатов), 
вычислимых за полиномиальное время, а также класс 
всех множеств, задаваемых предикатами из 5® (см. § 1.7); 

«ЛГ— класс всех множеств, порождаемых, за полино¬ 
миальное время (см. § 1.7); 

О — наименьшая степень неразрешимости, или тьюрин- 
гова степень разрешимых множеств (см. § 1.11). 



ВВЕДЕНИЕ 


Поразительно, как много дает теория алгоритмов. С ее 
помощью проясняются такие фундаментальные понятия, 
как доказуемость, сложность, случайность. Вообще в тео¬ 
рии алгоритмов (как, возможно, и во многих других слу¬ 
чаях) открытия состоят не столько в получении новых ре¬ 
зультатов, сколько в обнаружении новых понятий и в 
уточнении старых. А. И. Мальцев пишет в этой связи; «Сис¬ 
тема понятий и язык не являются чем-то внешним для мате¬ 
матических теорий, а составляют одну из определяющих 
частей их» [Мальцев, 1966, с. 72]. 

Развитие теории алгоритмов сталкивается с трудностью, 
вызванной тем, что алгоритмы сами по себе суть объекты 
весьма специфического типа и обладают свойством, нетипич¬ 
ным для математических объектов, а именно семантическим 
свойством «иметь смысл». В этом отношении теория алго¬ 
ритмов подобна математической логике, чьи теоремы и фор¬ 
мулы также имеют смысл. Смысл терма или формулы «ука¬ 
зателен»: терм указывает на (т. е. обозначает) вещь, а фор¬ 
мула — на факт. Смысл алгоритма «повелителен»: алгоритм 
должен быть исполнен. Таким образом, теория, изучающая 
алгоритмы, может трактоваться как своего рода лингви¬ 
стика повелительных предложений. Математики еще не 
привыкли обращаться надлежащим образом с лингвисти¬ 
ческими объектами, несущими на себе смысл. Поэтому при 
создании адекватной теории алгоритмов направляющую 
роль должна играть семантика, чисто математический под¬ 
ход для этой цели недостаточен (если считать, что чисто 
математический подход не должен использовать — в ка¬ 
честве технического понятия — понятие смысла). В теорию 
алгоритмов входит, на равных правах с понятием алгорит¬ 
ма, еще и понятие исчисления. Подобно термам, формулам 
и алгоритмам, исчисления также являются носителями 
смысла: однако смысл их не «указателен» и не «повелителен», 
а «разрешителен». 
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Поэтому самое теорию алгоритмов — в том виде, как 
дисциплина с таким названием сложилась к настоящему 
времени — было бы правильнее именовать теорией алго¬ 
ритмов и исчислений (сочетание терминов «алгоритмы и ис¬ 
числения», хотя и понимаемых в ином смысле, впервые по¬ 
явилось в сочинении Э. Шрёдера «Об алгоритмах и исчис¬ 
лениях» (см. [Шрёдер, 1880])). 

В соответствии с установившейся математической тради¬ 
цией теория алгоритмов не охватывает алгоритмы, взаимо¬ 
действующие со средой (в частности, с человеком в диалого¬ 
вом режиме), алгоритмы, играющие друг с другом, и т. д. 
Авторы сознают, что уже пришло время расширить сферу 
рассмотрения теории алгоритмов, включив в нее алгорит¬ 
мы указанных типов, но осуществить это расширение пока 
не в состоянии. В книге рассматриваются только алгорит¬ 
мы, предназначенные для получения некоего результата по 
исходному данному, т. е. алгоритмы, вычисляющие ту или 
иную функцию. 

Теория алгоритмов и исчислений может быть разделена 
на две части. Первая часть есть общая теория, имеющая дело 
со строением алгоритмов и исчислений самих по себе. Вто¬ 
рая часть представляет собой прикладную теорию, которая 
имеет дело с проблемами, связанными с понятиями алго¬ 
ритма и исчисления и возникающими в различных областях 
математики. В соответствии с этим книга состоит из двух 
частей; «Основные открытия общей теории алгоритмов» и 
«Основные математические приложения теории алгорит¬ 
мов». 

Хотя авторы и старались проследить историю возникно¬ 
вения того или иного понятия, термина или результата, им 
это не всегда удавалось. Поэтому библиографические ссыл¬ 
ки могут и не иметь приоритетного характера, а указывать 
лишь на использованные источники информации. 

При ссылках на различные книги и статьи в квадратные 
скобки заключаются фамилия автора (в необходимых слу¬ 
чаях также и инициал) и год публикации; при ссылке с 
более точным адресом — на определенную страницу или 
теорему — соответствующая страница или теорема указы¬ 
вается внутри тех же квадратных скобок. 

Определяемые термины (а также термины, обозначающие 
первичные, неопределяемые понятия) выделены курсивом 
(окружающий текст, следовательно, можно воспринимать 
как определение); выделены курсивом также имеющие тер¬ 
минологический характер «собственные имена» теорем. 



ЧАСТЬ I 

ОСНОВНЫЕ ОТКРЫТИЯ ОБЩЕЙ ТЕОРИИ 

АЛГОРИТМОВ 

В общей теории алгоритмов мы выделяем дескриптивную 
сторону, занимающуюся лишь вопросами о наличии или 
отсутствии алгоритмов и исчислений, приводящих к задан¬ 
ной дели (но без оценки затрат на достижение этой цели), 
и о способах задания этих алгоритмов и исчислений, и мет¬ 
рическую сторону, занимающуюся оцениванием сложности 
процессов вычисления и порождения. Понятия метрической 
теории алгоритмов еще не сложились в единую и стройную 
систему. 

Основные открытия, связанные с общими понятиями ал¬ 
горитма и исчисления, таковы. 

1. Общее понятие алгоритма как самостоятельное (от¬ 
дельное) понятие. 

2. Представительные вычислительные модели. 

3. Общее понятие исчисления как самостоятельное (от¬ 
дельное) понятие. 

4. Представительные порождающие модели. 

5. Выяснение связей между алгоритмами и исчисления¬ 
ми. 

6. Время и емкость как сложности вычисления и порож¬ 
дения. 

7. Вычислимые функции и породимые множества; разре¬ 
шимые множества; перечислимые множества. 

8. Понятие р-рекурсивной функции. 

9. Возможность арифметического и даже диофанто- 
ва представления любого перечислимого числового множе¬ 
ства. 

10. Построение неразрешимого породимого множества. 

11. Проблема сводимости Поста. 

12. Понятие относительного алгоритма, или алгоритма 
с оракулом. 
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13. Понятие вычислимой операции. 

14. Понятие программы; программы как объекты вычис¬ 
ления н порождения. 

15. Понятие нумерации и теория нумераций. 

16. Начало создания инвариантной, или машинно-неза¬ 
висимой, теории сложности вычислений. 

17. Теория сложности и энтропии конструктивных объек¬ 
тов. 

18. Удобные, или экономные, вычислительные модели. 

Часть 1 содержит § 1.1—1.18, каждый из которых посвя¬ 
щен соответствующему открытию и связанным с ним вопро¬ 
сам, а также § 1.0, посвященный изложению некоторых 
предварительных понятий. Для большинства терминов мес¬ 
то, где они вводятся, легко усмотреть из названий парагра¬ 
фов; ют наиболее существенные исключения; понятия нор¬ 
мы, нормированного ансамбля и ограниченно-искажающего 
отображения вводятся в § 1.6, понятия вычислительной, ре¬ 
зультативной, универсальной, главной (иначе гёделевой) 
и оптимальной функций —в §1.14. 

Ради экономии места, однако, в книге не приводятся (за 
некоторыми исключениями, о которых сказано ниже) опре¬ 
деления конкретных вычислительных и порождающих мо¬ 
делей — нормальных алгорифмов 1 ) Маркова, каноничес¬ 
ких систем Поста и нормальных систем Поста и т. п.; 
эти определения, так же как и определение ^-рекурсивных 
(иначе — частичнорекурсивных) функций, могут быть най¬ 
дены в учебной и популярной литературе а ) или в тех ори¬ 
гинальных работах, на которые мы ссылаемся; специальные 
комментарии по поводу термина «машина Тьюринга» см. 
ниже, в § 1.6. 

Упомянутые исключения — машины Колмогорова и ма¬ 
шины Шёнхаге, определения которых приводятся в § 1.2, 
а также определенные разновидности машин Тьюринга, 
описываемые в Дополнении. Используемый нами термин 


г ) Написания «алгоритм» и «алгорифм» являются одинаково пра¬ 
вильными. В прошлом было принято писать «алгорифм», сейчас все 
чаще пишут «алгоритм». А. А. Маркову написание через «тэ» не нра¬ 
вилось, и поскольку именно он изобрел нормальные алгорифмы, мы 
сохраняем для них его, авторское написание через «эф». К тому же 
написание «нормальный алгоритм» могло бы вызвать представление 
о противопоставлении нормальных алгоритмов ненормальным, чего мы 
хотели бы избежать. 

2 ) Например, популярное изложение машин Тьюринга (а также ря¬ 
да других вопросов, затрагиваемых в нашей книге) можно найти 
в статье [Хопкрофт, 1984]. 
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«вычислительная модель» можно понимать интуитивно, од¬ 
нако он может рассматриваться и в несколько более точном 
значении — как собирательное существительное для обо¬ 
значения любого известного семейства однотипных вычис¬ 
лительных устройств. Например, все машины Колмогорова 
составляют одно такое семейство, другое семейство состав¬ 
ляют все многоленточные машины Тьюринга, третье — все 
одноленточные машины Тьюринга; мы имеем здесь, следо¬ 
вательно, три вычислительные модели. Все одноленточные 
машины Тьюринга с фиксированным ленточным алфавитом 
также образуют вычислительную модель. Совокупность 
всех машин Колмогорова над колмогоровскими комплек¬ 
сами, размеченными буквами из фиксированного алфави¬ 
та, также может рассматриваться как вычислительная 
модель. 

Аналогично обстоит дело и с термином «порождающая 
модель». В § 1.18 термином «вычислительная модель » обозна¬ 
чается не любая модель, а лишь выбранная из некоторого 
ограниченного (впрочем, достаточно широкого), но зато 
более формально описанного класса. Здесь же оговоримся, 
что понятие вычислительной модели, употребляемое нами 
в том же смысле, что и, например, в [Слисенко, 1981], не 
имеет ничего общего с понятием вычислительной моде¬ 
ли в том смысле, как это используется в [Бахвалов, 
1977]. 


§ 1.0. Предварительные понятия теории алгоритмов: 
конструктивные объекты и их ансамбли, 
локальные свойства и локальные действия 

1.0.0. «Во всем современном математическом мышлении 
большое место занимает различение между „конструктив¬ 
ным" и „неконструктивным"»,— пишет А. Н. Колмогоров в 
предисловии [Колмогоров, 1954]. Далее он отмечает: «Лю¬ 
бое натуральное число может быть в принципе задано кон¬ 
структивно в виде 

1 -(- 1 -(- 1 -(-...- 1 - 1 ». 

Здесь наглядно проявляется различие между натураль¬ 
ным числом как количественной сущностью (неконструктив¬ 
ным объектом) и его заданием в виде цепочки единиц и 
плюсов (конструктивным объектом). Для теории алгорит¬ 
мов это различие имеет не столько философский, сколько 
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практический характер} алгоритмы могут иметь дело толь¬ 
ко с комбинациями знаков, т. е. только с конструктивными 
объектами. Можно усмотреть некую тонкую разницу между 
теорией алгоритмов и теорией вычислимых функций} по¬ 
следняя имеет дело не только с объектами, конструктивными 
в прямом смысле, но и с объектами, имеющими всего лишь 
конструктивные задания,— например, с натуральными или 
рациональными числами (для рациональных чисел конст¬ 
руктивными заданиями служат дроби, и вычислимость функ¬ 
ции от рационального аргумента обеспечивается наличием 
алгоритма, дающего равные результаты при обработке, 
скажем, дробей 3/7 и 12/28). 

А. П. Ершов справедливо включает понятие конструк¬ 
тивного объекта в основы теоретического программирова¬ 
ния — см. [Ершов А., 1977, § 2.1]. Это понятие следует при¬ 
знать не только основным, но и первичным. Строго говоря, 
оно принадлежит не столько теории алгоритмов, сколько 
введению в эту теорию. Как написано в одном старом 
учебнике: «Предметом для введения в науку обыкновенно 
назначают предварительные о ней понятия, т. е. такие по¬ 
нятия, которые не могут войти в состав самой науки, одна- 
кож существенно к ней относятся и необходимо ею предпо¬ 
лагаются». 

Все попытки определить понятие конструктивного объ¬ 
екта — и наше изложение не является исключением — не¬ 
избежно уклоняются либо в сторону расплывчатого описа¬ 
ния, либо в сторону определения частных видов конструк¬ 
тивных объектов. Как все неопределяемые понятия, оно 
усваивается на примерах. К таким примерам мы сейчас и 
перейдем. 

1.0.1. Первые примеры конструктивных объектов: слова 
и деревья. Наиболее изученными конструктивными объекта¬ 
ми являются слова, составленные из букв какого-либо ко¬ 
нечного алфавита Б, короче —слова в Б, еще корочё — 
Б-слова. Слова часто служат основными объектами при пост¬ 
роении теории алгоритмов; наиболее последовательный при¬ 
мер такого построения — теория нормальных алгорифмов 
Маркова (см. монографию [Марков, 1954], где словам по¬ 
священа гл. I). Понятие слова встречается, и притом в ал¬ 
горитмическом контексте, уже у А. Туэ в [Туэ, 1914] — см. 
ниже добавление к § 1.3. Однако Туэ осознавал существо¬ 
вание конструктивных объектов более общего вида, чем 
слова, а именно некоторых древовидных образований (см. 
[Туэ, 1910]). 
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Другой традиционный пример — матрицы о целочислен¬ 
ными коэффициентами, записанными в какой-либо системе 
счисления. 

Наконец, третий важный пример образуют (Б, ^-де¬ 
ревья. Пусть Б — алфавит, к — натуральное число. Тогда 
(Б, к)-деревом называется дерево со следующими дополни¬ 
тельными свойствами. Одна из вершин выделена и названа 
корнем (такое дерево называется корневым)’, на всех ребрах 
задана ориентация, так что в каждую вершину из корня 
ведет ориентированный путь. Предполагается, что каждая 
вершина дерева помечена одной из букв алфавита Б и для 
каждой вершины все исходящие из нее ребра помече¬ 
ны различными числами из множества { 1 , ..., к} 
(так что исходящих ребер при данной вершине не 
более к). 

Очевидно, каждое Б-слово можно считать (Б.І)-деревом 
с корнем в первой букве слова. 

Алгебраический пример. Пусть задано ко¬ 
нечное множество Б функциональных и предметных имен 
(сигнатура) , причем валентность (число аргументов) функ¬ 
циональных имен не превосходит к. Тогда всякому замкну¬ 
тому терму сигнатуры Б можно следующим образом поста¬ 
вить в соответствие (Б, /г)-дерево. Если а — предметное 
имя из Б, ему ставится в соответствие дерево из одной вер¬ 
шины, помеченной а. Если / есть «-местное функциональное 
имя, іи. . ,,і п суть термы, то терму /(^,. . ,,і п ) ставится в 
соответствие дерево с корнем, помеченным /, из которого 
ведут п ребер в корни деревьев, поставленных в соответст¬ 
вие термам и,. . ребра эти занумерованы числами от 
1 до п. 

На множестве замкнутых термов можно задать структуру 
алгебры (свободной алгебры, порожденной сигнатурой Б; 
подробнее об этом будет говориться в добавлении к § 1.3). 
Например, свободный группоид с образующими а и Ь и 
операцией о вкладывается в множество ({а, Ь, о }, 3)-де- 
ревьев. 

Наконец заметим, что алгебру, свободную в многообра¬ 
зии всех ассоциативных группоидов с единицей, т. е. сво¬ 
бодную полугруппу^ также можно представлять состоящей 
из конструктивных объектов; ее можно рассматривать как 
множество всех слов в алфавите образующих. 

1.0.2. Конструктивные объекты: попытка общего опи¬ 
сания. В попытках разъяснить наше понимание того, что 
такое конструктивный объект, мы начнем с более широкого 
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и также неопределяемого понятия — понятия конечного 
объекта. 

Конечный объект — это объект, о котором можно 
мыслить, не привлекая абстракции актуальной бесконечно¬ 
сти (см. [Нагорный, 1977 г.]), т. е. объект, который может 
быть как бы предъявлен целиком (разумеется, все сказанное 
никак не претендует на роль определения, а скорее пред¬ 
ставляет собой повторение одного и того же). Важно отме¬ 
тить, что конечное множество конечных объектов является 
конечным объектом. Классический пример конечного объ¬ 
екта — конечный граф. 

Некоторые из конечных объектов являются конструктив¬ 
ными объектами. Мы считаем, что каждый конструктивный 
объект состоит из конечного множества элементов, принад¬ 
лежащих каждый к одному из конечного числа типов (так, 
слово «слово» состоит из 5 букв, отнбсящихся к 4 типам) и 
связанных некоторыми отношениями также из конечного 
числа типов (так, буквы слова связаны отношением упоря¬ 
доченного соседства). Таким образом, конструктивный объ¬ 
ект имеет расчлененное (дискретное) строение и составлен 
из отдельных элементов, как молекула из атомов. Мы пред¬ 
полагаем далее, что для конструктивного объекта задана 
(не м о ж е т быть задана, а у ж е задана) некоторая 
«внутренняя система координат», позволяющая однозначно 
локализовать любой его элемент. 

Такой внутренней системой координат обладает слово 
(можно говорить о второй букве слева), матрица (можно го¬ 
ворить о пересечении восьмой строки и третьего столбца), 
(Б, ^-дерево (можно задать путь от корня к данной верши¬ 
не). Такой системой координат не обладает ни конечное 
множество, взятое само по себе (разумеется, на него можно 
наложить внутреннюю систему координат, упорядочив его), 
ни конечный граф (и на него можно наложить некую систе¬ 
му, указав порядок обхода вершин). В двух последних при¬ 
мерах в рассматриваемый объект можно ввести внутреннюю 
систему координат, но ввести неоднозначно, так что до вве¬ 
дения такой системы мы не в состоянии указать «адрес» 
интересующего нас элемента. 

Говоря о системе координат, естественно требовать на¬ 
личия «начала координат»; таким образом, в каждом конст¬ 
руктивном объекте некоторый его элемент выделен как на¬ 
чальный — это тот элемент, с которого начинается «чте¬ 
ние» объекта (первая буква слова, первый элемент первой 
строки матрицы, корень дерева и т. д.). Именно наличие у 
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конструктивного объекта внутренней системы координат 
обеспечивает возможность его ввода в вычислительное уст¬ 
ройство. 

За исключением [Криницкий, 1977а, §2] и [Криниц¬ 
кий, 1983, § 2.2], где предлагается определение так назы¬ 
ваемого конструктивного элемента, в литературе встречают¬ 
ся лишь краткие пояснения к понятию конструктивного 
объекта — см. [Шанин, 1962], [Марков, Нагорный, 1984, 
§ 1], [Манин, 1980, гл. I, §6]; в последней работе термином 
«конструктивный объект» обозначается то, что мы обозна¬ 
чили термином «конечный объект». Мы убеждены, что ал¬ 
горитмы требуют именно конструктивных объектов и не мо¬ 
гут оперировать непосредственно конечными объектами, не 
являющимися конструктивными. Тот факт, что конечные 
объекты могут быть.,заданы конструктивно, показывает 
лишь, что для них существуют конструктивные задания 
(единообразные для каждого класса «однородных между со¬ 
бой» конечных объектов) и эти конструктивные задания яв¬ 
ляются конструктивными объектами. Каждый такой конст¬ 
руктивный объект есть исходный конечный объект, допол¬ 
ненный тем или иным способом внутренней системой коор¬ 
динат; ввиду многообразия этих способов у одного и того 
же объекта может быть много различных заданий. Именно 
с такими заданиями и работают алгоритмы. 

Предположим, что алгоритм работает согласованным 
образом, т. е. в применении к заданиям одного и того же 
выдает в качестве результата снова задания одного и того 
же. Тогда можно принять терминологическое соглашение и 
говорить о вычислимых функциях над объектами, имеющи¬ 
ми задания (см. начало настоящего параграфа). Говорить 
же — при отсутствии такого соглашения — о вычислимых 
функциях, а тем более об алгоритмах над конечными объек¬ 
тами как о чем-то само собой разумеющемся, как это сде¬ 
лано в [Шёнфилд, 1971, § 1], нам представляется неправо¬ 
мерным. 

1.0.3. Локальные свойства и локальные действия: нефор¬ 
мальное изложение. Предположим, что в каждом из рассмат¬ 
риваемых конструктивных объектов выделен некоторый ог¬ 
раниченный участок.(«активная часть» согласно [Колмого¬ 
ров, 1953]), состоящий из начального элемента и всех «до¬ 
статочно близких к нему элементов». Такое выделение может 
быть осуществлено, например, если на объекте каким-то 
образом задана метрика, так что можно говорить о расстоя¬ 
нии от одного элемента до другого; тогда активная часть 
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состоит из всех элементов (и, разумеется, имеющихся сия 
зей между ними), которые удалены от начального не более 
чем на фиксированное число, называемое показателем ло¬ 
кальности или радиусом активной части. Так, для слова 
его активная часть — это начало слова; длина этого нача¬ 
ла зависит от выбранного показателя локальности — радиу¬ 
са активной части. В общем случае активную часть можно 
интерпретировать как ту область конструктивного объекта, 
которая обозревается наблюдателем или устройством, нахо¬ 
дящимся в начальном элементе. Очевидно, что представ¬ 
ляют специальный интерес свойства конструктивного объек¬ 
та, зависящие только от активной части объекта. Поскольку 
при данном радиусе возможно лишь конечное число ак¬ 
тивных частей (на интуитивном уровне это ясно, для кон¬ 
кретных видов конструктивного объекта, рассматриваемых 
ниже, это легко проверяется), каждое локальное свойство 
можно задать конечным перечнем удовлетворяющих ему 
активных частей. 

Локальное действие состоит в замене активной части рас¬ 
сматриваемого объекта на некоторый другой «кусок». Как 
происходит эта замена и, в частности, как новый кусок под¬ 
клеивается к остающейся неизменной «неактивной» части 
обрабатываемого объекта, разумеется, требует разъяснений. 
Для достаточно широких классов конструктивных объектов 
эти разъяснения будут сделаны ниже. 

1.0.4. Колмогоровские комплексы. Подход, согласно ко¬ 
торому конструктивный объект представляет собой конеч¬ 
ное множество элементов, связанных какими-то отношения¬ 
ми, причем и элементы, и отношения могут быть одного из 
заранее указанного конечного числа типов, принадлежит 
Колмогорову (см. [Колмогоров, 1953], [Колмогоров, Успен¬ 
ский, 1958]); вместо термина «конструктивный объект» Кол¬ 
могоров употреблял термин «состояние» (алгоритмического 
процесса). 

Реализация этого подхода приводит к понятию колмого¬ 
ровского Б-комплекса. Точное определение этого понятия 
будет приведено ниже. Сейчас мы поясним, каким образом 
осуществляется переход от конструктивных объектов как 
«конечных множеств элементов, связанных какими-то отно¬ 
шениями», к колмогоровским Б-комплексам. Если и эле¬ 
менты, и отношения изображать в виде вершин некоторого 
графа, соединяя ребрами вершины-отношения с вершинами- 
элементами и помечая каждую вершину символом соответ¬ 
ствующего типа, получится размеченный граф, т. е. граф, 
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вершины которого помечены буквами некоторого конечного 
алфавита. 

Мы сознательно упростили картину, на самом деле пере¬ 
ход от объекта к изображающему его графу чуть сложнее: 
ребро не идет непосредственно от отношения к элементу. 
Между отношением и элементом, участвующим в этом отно¬ 
шении, располагаются еще две промежуточные вершины, по¬ 
меченные натуральными числами. Эти числа указывают 
соответственно порядковый номер элемента среди всех эле¬ 
ментов, связанных данным отношением, и порядковый но¬ 
мер отношения среди всех отношений, в которых участвует 
данный элемент. Оба эти числа считаются ограниченными 
сверху некоторыми заранее выбранными числами, поэтому 
добавление соответствующих символов оставляет алфавит 
разметки конечным. т . 

При этом оказывается, что полученный размеченный 
граф обладает особым «колмогоровским» свойством: для 
произвольной вершины все соседние с нею вершины имеют 
разные пометки. Вершина, соответствующая начальному 
элементу, объявляется начальной вершиной и, таким обра¬ 
зом, граф оказывается инициальным. В случае связного 
графа (а только такие графы мы будем рассматривать) ини- 
циальность и свойство «колмогоровости» обеспечивает воз¬ 
можность введения внутренней системы координат: каждую 
вершину можно однозначно задать, указав цепочку пометок 
вершин, встречающихся на пути из начальной вершины в 
задаваемую. Так мы приходим к понятию колмогоровского 
комплекса: колмогоровский комплекс над алфавитом Б, 
или колмогоровский Ъ-комплекс (короче, Ъ-комплекс), есть 
связный инициальный неориентированный граф, вершины 
которого помечены буквами конечного алфавита Б и кото¬ 
рый обладает колмогоровским свойством. 

Требование связности комплекса является основным 
отличием сформулированного только что определения от 
определения из работы [Колмогоров, Успенский, 1958]. 
Отметим также, что в отличие от [Колмогоров, Успен¬ 
ский, 1958] мы не требуем, чтобы пометка начальной вер¬ 
шины отличалась от-пометок других вершин комплекса, а 
считаем, что начальная вершина должна быть выделена ка¬ 
ким-то другим способом. 

Как вытекает из самой конструкции Колмогорова, вся¬ 
кий конструктивный объект (если понимать его так, как по¬ 
нимает Колмогоров) естественно изображается в виде не- 
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которого колмогоровского комплекса. Например, вот как 
изображается в виде комплекса слово аЬа : 



Начальная 

вершина 


Здесь буквы пил означают соответственно «вправо» и 
«влево». Таким образом, Б-слово изображается в виде кол¬ 
могоровского Б'-комплекса, где Б'—Б II {л, п}. 

1.0.5. (Б, й)-комплексы. Пусть заданы алфавит Б и на¬ 
туральное число к. Следующий конструктивный объект на¬ 
зывается (Б, к)-комплексом : инициальный (т. е. с выделен¬ 
ной начальной вершиной) конечный ориентированный граф, 
являющийся связным (для ориентированного графа связ¬ 
ность означает, что всякая вершина достижима из начальной 
по некоторому ориентированному пути) и имеющий следую¬ 
щую разметку на своих вершинах и ребрах: все вершины 
помечены буквами из Б, и для всякой вершины все исходя¬ 
щие из нее ребра помечены различными натуральными чис¬ 
лами из множества (0,. . ., к —1} (отсюда вытекает, что ис¬ 
ходящая степень любой вершины не превосходит к). 

Множество вершин (Б, А)-комплекса II будем обозна¬ 
чать через ѵ(Ц). 

Каждое слово в алфавите Б легко изображается в виде 
(Б, 2)-комплекса, как показывает пример: 

1 Г 


/ 


Начальная 

вершина 


0 


ь 


о 


Здесь изображено слово аЬа. 

Каждый колмогоровский Б-комплекс следующей проце¬ 
дурой превращается в (Б, А)-комплекс, где к — число букв 
алфавита Б. Буквы алфавита нумеруются числами от 0 
до к —1, каждое (неориентированное) ребро Б-комплекса 
заменяется на два ориентированных с противоположными 
ориентациями, каждому возникшему ориентированному 
ребру присваивается в качестве его числовой пометки но- 



$ 1.0. ПРЕДВАРИТЕЛЬНЫЕ ПОНЯТИЯ 


25 


мер буквы, стоящей при той вершине, в которую ведет рас¬ 
сматриваемое ребро. 

Частным случаем (Б, ^-комплексов являются структу¬ 
ры Шёнхаге из [Шёнхаге, 1980] (см. ниже добавление к 
§ 1.2). Структура Шёнхаге есть (Б, й)-комплекс, в котором 
из каждой вершины исходит ровно к ребер, а алфавит Б — 
однобуквенный. 

1.0.6. Ансамбли. Из предыдущего изложения можно 
было заметить, что конструктивные объекты ведут себя как 
«стадные» образования. Действительно, они естественным 
образом группируются в скопления, состоящие из всех 
«сходных (или однородных) между собой» объектов. Одно 
такое скопление образуют при фиксированном Б всевозмож¬ 
ные Б-слова, другое, при фиксированных Б и к ,— всевоз¬ 
можные (Б, ^-комплексы. Эти скопления естественно было 
бы называть «стадами», «роями», «косяками», «стаями» и 
даже «выводками». Мы, однако, предпочитаем называть их 
ансамблями (в [Успенский, Семенов, 1981] — «а§§ге§а1ез»)і 
этот термин более нейтрален и менее зоологичен. Мы не бу¬ 
дем пользоваться термином «пространство конструктивных 
объектов», так как его легко спутать с термином «простран¬ 
ство» из [Шёнфилд, 1971, § 1], обозначающим совокупность 
конечных (не обязательно конструктивных) объектов. 

Отметим, что далеко не всякое разрешимое (см. § 1.7) 
подмножество ансамбля следует считать ансамблем, по¬ 
скольку ансамбль должен включать в себя все объекты дан¬ 
ного (достаточно просто определяемого) типа. Например, 
множество всех Б-слов, длина которых есть полный квад¬ 
рат, не образует ансамбля. В этом заключается еще одно 
отличие излагаемого здесь подхода от изложенного в [Шён¬ 
филд, 1971, § 1], где, по-видимому, всякое разрешимое под¬ 
множество пространства само есть пространство. 

Похоже, что понятие ансамбля является более первич¬ 
ным, чем понятие конструктивного объекта,— объект может 
восприниматься как конструктивный только в рамках не¬ 
которого ансамбля. 

Для каждого конечного алфавита Б и каждого натураль¬ 
ного числа к можно указать следующие основные ансам¬ 
бли. 

1. Ансамбль Б -слов. Если Б содержит более одной бук¬ 
вы, ансамбль Б-слов называется словарным ансамблем 
(над Б); в случае если алфавит Б является однобуквенным, 
ансамбль Б-слов естественно отождествляется о натураль¬ 
ным рядом N. 
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2. Для произвольных конечного Б и натурального А 
ансамбль (Б, к)-деревьев. 

3. Ансамбль колмогоровских Ъ-комплексов, или колмого¬ 
ровский Б-ансамбль. 

4. Ансамбль всех таких колмогоровских Б-комплексов, 
у которых степень каждой вершины не превосходит к. 

5. Ансамбль (Б, к)-комплексов, или, короче, (Б, ^-ан¬ 
самбль. 

6. Расширенный ансамбль Ъ-слов. Он состоит из всех 
изображений Б-слов в виде (Б, 2)-комплексов (см. пример 
выше), но с исключением требования, чтобы начальной вер¬ 
шиной становилась первая буква слова! разрешается, чтобы 
любая вершина была начальной. 

Для дальнейшего можно считать, что понятие ансамбля 
(а вместе с ним и понятие конструктивного объекта) пол¬ 
ностью задается сделанным только что перечислением и, та¬ 
ким образом, является точно определенным. Мы бы не хо¬ 
тели, однако, полностью уничтожать хотя и расплывчатое, 
но интуитивно ясное и глубокое содержание этих понятий. 

Между любыми двумя ансамблями существует взаимно 
однозначное соответствие, которое задается (в обоих на¬ 
правлениях) алгоритмами; такое соответствие называется 
изоморфизмом ансамблей. В этом смысле все ансамбли изо¬ 
морфны. 

Мы уже видели, что между ансамблями имеются некото¬ 
рые естественные вложения, например ансамбль Б-слов 
естественно вкладывается в ансамбль (Б, 1)-деревьев. Легко 
видеть, что любой из рассмотренных ансамблей вкладывает¬ 
ся при подходящих Б и к в (Б, А)-ансамбль. Поэтому при 
построении теории алгоритмов можно было бы ограничиться 
лишь (Б, А)-ансамблями. Так мы и поступим в следующем 
разделе при строгом определении понятия локального дей¬ 
ствия (неформально это понятие было уже разъяснено). 

Декартово произведение ансамблей легко вкладывается 
в некоторый новый ансамбль. Множество кортежей (т. е. 
конечных последовательностей) элементов данного ансамб¬ 
ля также легко вкладывается в подходящий ансамбль. Как 
мы уже отмечали, конечное подмножество ансамбля не яв¬ 
ляется конструктивным объектом. Чтобы алгоритмы могли 
работать с такими подмножествами, последние сперва надо 
конструктивно как-то задать — например, посредством кор¬ 
тежей; тогда надо ограничиться только такими алгоритмами 
над кортежами, результаты которых не зависят от порядка 
членов кортежей. В дальнейшем, говоря об алгоритмах и 



исчислениях, работающих с конечными подмножествами 
ансамблей, мы будем считать, что все соответствующие сог¬ 
лашения уже приняты. 

1.0.7. Локальные свойства и локальные действия: фор¬ 
мальное определение. Пусть фиксированы алфавит Б и на¬ 
туральное число к. Мы сейчас определим понятия локаль¬ 
ного свойства и локального действия в ансамбле (Б, к)- 
комплексов, следуя данным выше неформальным разъясне¬ 
ниям этих понятий. Более точно, мы определим понятия 
/■-локального свойства и г-локального действия, где г есть 
некоторое натуральное число (показатель локальности; 
чем он меньше, тем свойство или действие «локальнее»). 

Локальные свойства. Данное нами выше неформальное 
разъяснение понятия локального свойства (как свойства, 
зависящего только от активной части комплекса) становит¬ 
ся точным, если дать точное определение активной части. 
Именно, назовем г-окрестностью данного (Б, &)-комплекса- 
(Б, А)-комплекс, состоящий из всех вершин исходного комп¬ 
лекса, достижимых из начальной по ориентированным пу¬ 
тям длины не более г, и всех соединяющих эти вершины ре¬ 
бер. Теперь г-локальным свойством (Б, к)-комплекеов назо¬ 
вем любое свойство (Б, ^-комплексов, зависящее только от 
их г-окрестностей. В дальнейшем упоминания параметров 
Б, к и г будут опускаться, если значения этих параметров 
ясны из контекста (так что, например, мы будем говорить 
просто «локальные свойства», не указывая ни Б, ни к, ни г). 

Локальные действия в (Б, А)-ансамбле будут преобразо¬ 
вывать некоторые (Б, ^-комплексы в (Б, ^-комплексы. Да¬ 
дим точное определение, отражающее данное выше нефор¬ 
мальное описание этого понятия. Любое /--локальное (Б, 
к) -действие задается указанием числа г н строчки 

и— <ѵ, у, в>, 

где II и № суть некоторые (Б, А)-комплексы, у есть отобра¬ 
жение из ѵ(Ц) в ѵ(Щ, 8 есть инъективное отображение из 
ѵ(ІІ) в ѵ{Щ (напомним, что ѵ(О) есть множество вершин 
комплекса О). 

Применение г-локального (Б, А)-действия к (Б, ^-комп¬ 
лексу 5 состоит в следующем переходе от комплекса 5 к 
комплексу 5* (при этом сначала формируется вспомога¬ 
тельный комплекс 5'): 

1) г-окрестНость комплекса 5 отождествляется с II (если 
это возможно; если нет — действие неприменимо). Это 



ЧА1»>10 псі^олд. иоп^шішь ѵлм 


КО 

отождествление происходит однозначно в силу определения 
комплекса; 

2) вершинами комплекса 5' объявляются все вершины 
комплексов 5\(/ и й 7 ; 

3) если Ь 3\11, в 5 было ребро ( а , Ь) и у ( Ъ ) опре¬ 

делено, то (а, у(Ь)) становится ребром в 5' с тем же номе¬ 
ром, который имело в 5 ребро (а, Ъ) (как ребро, выходя¬ 
щее из а)\ 

4) если 5\(/, в 5 было ребро (а, Ь) и б (а) опре¬ 

делено, то (б (а), Ь) становится ребром с таким же номером, 
какой имело ребро (а, Ь) (инъективность 6 гарантирует раз¬ 
личие номеров у всех ребер, выходящих из одной верши¬ 
ны 5'); 

5) начальная вершина Й 7 объявляется начальной вер¬ 
шиной 5', и из 5' выкидываются все вершины, не достижи¬ 
мые из начальной, вместе с ведущими из этих вершин реб¬ 
рами. То, что получилось, и есть 5*. 

Определение результата применения /--локального (Б, 
А)-действия к (Б, ^-комплексу завершено. Как и в случае 
свойств, упоминания Б, г и к мы будем опускать, если зна¬ 
чения соответствующих параметров ясны из контекста. 

Можно рассматривать локальные действия, не выводя¬ 
щие за пределы заданного подансамбля (т. е. подмножества, 
являющегося ансамблем) (Б, А)-ансамбля. В силу сделан¬ 
ных выше замечаний о вложении одних ансамблей в другие 
любой из явно перечисленных нами ансамблей есть подан¬ 
самбль подходящего (Б, А)-ансамбля. Например, можно тре¬ 
бовать, чтобы локальное действие не выводило за пределы 
ансамбля Б-слов, т. е. было действием в этом ансамбле. 
Тогда это будет действие, состоящее в замене начала слова 
на другое начало. Можно требовать, чтобы действие не вы¬ 
водило за пределы расширенного ансамбля Б-слов. Тогда 
это будет действие, состоящее в замене заданного вхожде¬ 
ния подслова на некоторое слово. Наконец, можно требо¬ 
вать, чтобы действие не выводило за пределы колмогоров¬ 
ского Б-ансамбля. Тогда мы приходим к понятию колмо¬ 
горовского Б-действия. 

Колмогоровское г-локальное Ъ-действие задается указа¬ 
нием числа г и строчки 

У>, 

где V, Й 7 суть Б-комплексы, а у есть взаимно однозначное 
отображение из ѵ(Ц) в ѵ(Щ, обладающее следующими 
свойствами: 1) у сохраняет пометки, 2) для всякой вершины 
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а, для которой у (а) определено, множество пометок при вер¬ 
шинах, соединенных в 1Г ребром е у (а), содержится в мно¬ 
жестве пометок при вершинах, соединенных в V ребром с 
а . Применение локального действия к Б-комплексу опреде¬ 
ляется так же, как в случае произвольных (Б, ^-комплек¬ 
сов; при этом в качестве б мы берем отображение, совпадаю¬ 
щее с у- 

§ 1.1. Общее понятие алгоритма 

как самостоятельное (отдельное) понятие 

1.1.0. Самым главным открытием в науке об алгоритмах, 
безусловно, было открытие самого понятия алгоритма в 
качестве новой и отдельной сущности. Мы хотим подчерк¬ 
нуть, что это открытие следует рассматривать как отдель¬ 
ное, не смешивая его с открытием представительных вы¬ 
числительных моделей (Тьюринга, Поста, Маркова, Колмо¬ 
горова), о которых пойдет речь в§ 1.2. Иногда ошибочно по¬ 
лагают, что понятие алгоритма не может быть удовлетвори¬ 
тельно воспринято в отрыве от тех или иных формальных 
конструкций, имея в виду при этом прежде всего вышеназ¬ 
ванные модели. Однако эти конструкции были предложены 
как раз для уточнения, или адекватной формализации, об¬ 
щего интуитивного понятия алгоритма (а вернее сказать, 
понятия вычислимой функции); само же это понятие, та¬ 
ким образом, признавалось существующим независимо от 
(а в историческом плане — существующим до) указанных 
формализаций. 

Как указывал Гёдель в [Гёдель, 1958], вопрос о том, 
правильно ли определение вычислимости функции по Тью¬ 
рингу, не имеет смысла, если понятие вычислимой функции 
не является интуитивно понятным априори. Подобная си¬ 
туация достаточно типична: общее интуитивное понятие, 
скажем поверхности, имеет смысл независимо от дефини¬ 
ций, предлагаемых топологией или дифференциальной гео¬ 
метрией; разница лишь в том, что понятие поверхности из¬ 
вестно с античных времен (оно встречается в первых стро¬ 
ках евклидовых «Начал»), а понятие алгоритма появилось, 
по-видимому, лишь в XX веке. 

Для историков математики было бы поучительной зада¬ 
чей проследить возникновение и формирование (которое, 
возможно, еще не завершилось) понятия алгоритма. Евклид 
и ал-Хорезми предложили первые примеры алгоритмов, 
применяемых сегодня. Что касается общего понятия алго- 
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ритма — эффективной вычислительной процедуры, то едва 
ли не самые ранние примеры использования такого понятия 
встречаются в первой четверти XX века, в работах Борелг 
(1912 г.) и Вейля (1921 г.). Борель [Борель, 1912, с. 16Ц 
выделяет «вычисления, которые могут быть реально осу¬ 
ществлены» и подчеркивает: «Я намеренно оставляю в сто 
роне большую или меньшую практическую длительность; 
суть здесь та, что каждая из этих операций осуществима в 
конечное время при помощи достоверного и недвусмыслен¬ 
ного метода» (с. 162; перевод заимствуем из [Медведев Ф., 
1976, с. 100]). Вейль (см. [Вейль, 1921]) при обсуждении 
понятия «Гшісііо Оізсгеіа» явно выделяет среди произволь¬ 
ных соответствий алгоритмические. Оба они, по существу, 
приходят к понятию вычислимой функции (а Борель —- 
даже к термину «Ьпсііоп саІсиІаЫе», правда, обознача¬ 
ющему несколько иное алгоритмическое понятие; см. 
ниже §2.4). 

В докладе [Чёрч, 1936], представленном в 1935 г., Чёрч, 
уверенно пользуется термином «эффективно вычислимая 
(еЯесііѵеІу саІсиІаЫе) функция», считая его общепонятным 
и предшествующим какой бы то ни было формализации. От 
метим, что в ранних англоязычных сочинениях по теории 
алгоритмов (см., например, [Тьюринг, 1936], [Тьюринг, 
1937а] и особенно [Тьюринг, 1939, § 2]) термин «еЯесііѵеІу 
саІсиІаЫе» относится к интуитивному понятию, а термин 
«сотриіаЫе» — к функциям, вычисление которых осуществ¬ 
ляется некоторой вычислительной моделью. В современных 
публикациях термин «сотриіаЫе» относится к каждому из 
этих понятий, тогда как термин «саІсиІаЫе» не имеет широ¬ 
кого распространения. 

Понятие алгоритма, подобно понятиям множества и на¬ 
турального числа, принадлежит к числу понятий столь 
фундаментальных, что оно не может быть выражено через 
другие (в частности, теоретико-множественные), а должно 
рассматриваться как неопределяемое. Лишь как пояснения, 
а не как определения следует расценивать формулировки 
типа «Алгоритм — это точное предписание, которое задает 
вычислительный процесс, начинающийся с произвольного 
(но выбранного из фиксированной для данного алгоритма 
совокупности) исходного данного и направленный на полу¬ 
чение полностью определяемого этим исходным данным ре¬ 
зультата» (ср., например, [Марков, 1957]). Однако и подоб¬ 
ных пояснений достаточно для установления некоторых со¬ 
держательных фактов, например того факта, что не каждая 
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функция с натуральными аргументами и значениями может 
быть вычислена каким-либо алгоритмом (поскольку не су¬ 
ществует несчетное количество предписаний). Более глу¬ 
бокое изучение требует дальнейших уточнений (см. такие 
уточнения в [Колмогоров, 1953], [Колмогоров, Успенский, 
1958], [Роджерс, 1967, §1.1], [Кнут, 1968, §1.1], [Успен¬ 
ский, 1970], [Успенский, 1977]). Колмогоров пишет: 

«Мы отправляемся от следующих наглядных представле¬ 
ний об алгоритмах: 

1) Алгоритм Г, примененный ко всякому «условию» 
(«начальному состоянию») А из некоторого множества & 
(«области применимости» алгоритма Г), дает «решение» 
(«заключительное состояние») В. 

2) Алгоритмический процесс расчленяется на отдельные 
шаги заранее ограниченной сложности; каждый шаг состоит 
в «непосредственной переработке» возникшего к этому шагу 
состояния 5 в состояние 5*=йг(5). 

3) Процесс переработки А°=А в А 1 =Й Г (А°), А 1 в 
Л а =52г(А 1 ), в А 3 =П г (А г ) и т. д. продолжается до тех 
пор, пока либо не произойдет безрезультатная остановка 
(если оператор Йг не определен для получившегося состоя¬ 
ния), либо не появится сигнал о получении «решения». 
При этом не исключается возможность неограниченного про¬ 
должения процесса (если никогда не появится сигнал о ре¬ 
шении). 

4) Непосредственная переработка 5 в 5*=йг(5) про¬ 
изводится лишь на основании информации о виде заранее 
ограниченной «активной части» состояния 5 и затрагивает 
лишь эту активную часть» ([Колмогоров, 1953]). 

Формулировка Колмогорова содержит две существенные 
идеи. Первая из этих идей — идея итеративности алгорит¬ 
мического процесса. Формулировка предлагает общую схе¬ 
му детерминированного преобразования одних объектов в 
другие — схему, согласно которой всякое такое преобразо¬ 
вание представляет собой результат многократного приме¬ 
нения одной и той же, фиксированной для данного преоб¬ 
разования, сравнительно простой операции (называемой у 
Колмогорова «оператором») непосредственной переработки. 
В нормальном алгорифме Маркова, например, операция не¬ 
посредственной переработки задается списком пар слов 
(Аі, Ві),. . ., {А п , В п ); применение операции к слову Р 
заключается в обнаружении того наименьшего I , для кото¬ 
рого Л г имеет вхождение в Р, и в замене самого левого из 
таких вхождений на В { . 



Другая существенная идея формулировки Колмогорова 
выражена в ее последнем пункте; это идея локальности каж¬ 
дого отдельного шага. В [Колмогоров, 1953] (см. также 
[Колмогоров, Успенский, 1958]) предложено, по существу, 
общее понятие локальной операции (сам термин «локальная 
операция», впрочем, отсутствует в указанных публика¬ 
циях: Колмогоров говорит о «непосредственной переработ¬ 
ке»). Локальная операция состоит в удалении заранее огра¬ 
ниченного «куска» обрабатываемогр объекта (состояния) 
и замене этого удаляемого «куска» на другой «кусок», опре¬ 
деляемый в зависимости от первого (точнее об этом будет 
сказано в § 1.2 при определении оператора непосредствен¬ 
ной переработки для машин Колмогорова). 

Все вычислительные модели с локальным преобразова¬ 
нием информации легко могут быть описаны в колмогоров¬ 
ских терминах. Мы будем называть их моделями колмогоров¬ 
ского типа. Модели Поста и Тьюринга —■ примеры таких 
моделей. С другой стороны, модели с нелокальными шага¬ 
ми, такие как нормальные алгорифмы Маркова (см. [Мар¬ 
ков, 1951], [Марков, 1954]) или машины с произвольным 
доступом к памяти (см. [Ахо, Хопкрофт, Ульман, 1974], 
[Слисенко, 1981]), требуют предварительного расщепления 
каждого своего шага на локальные шаги (осуществляемые 
локальными операциями) и, следовательно, не являются мо¬ 
делями колмогоровского типа. 

Для того чтобы задать вычислительную модель с локаль¬ 
ным преобразованием информации, нужно конкретизиро¬ 
вать встречающиеся в формулировке Колмогорова понятия 
«состояние», «непосредственная переработка», «активная 
часть», «сигнал о решении». Заметим, между прочим, что 
следуя Колмогорову, состоянием машины Тьюринга мы 
должны считать не то, что нередко называют ее (внутрен¬ 
ним) состоянием (см. [Марков, 1970, § 5]), или конфигура¬ 
цией (см. [Клини, 1952, § 67]), а то, что в [Клини, 1952, 
§ 67] названо ситуацией (зііиаііоп), или полной конфигура¬ 
цией. Эти ситуации, или полные конфигурации, машины 
Тьюринга естественно было бы называть также « полными со¬ 
стояниями ». (Отметим, что в [Мальцев, 1966, § 12] терми¬ 
ном «состояние» или синонимичным термином «конфигура¬ 
ция» обозначается, в колмогоровском духе, именно полное 
состояние, или полная конфигурация.) Итак, каждая модель 
предполагает свою конкретизацию колмогоровских понятий. 

В [Колмогоров, 1953] предложена наиболее общая схема 
такой .конкретизации. Эта схема может рассматриваться 



как адекватная формализация точного понятия алгоритма 
(при работе с моделями с нелокальным преобразованием ин¬ 
формации нужно разбить нелокальные шаги на локальные, 
как было замечено выше). 

Вычислительную модель, определяемую этой наиболее 
общей схемой, мы называем машинами Колмогорова (точное 
определение будет дано в § 1.2). 

Мы видим, что общее понятие алгоритма опирается на 
некоторые предварительные понятия — прежде всего на 
понятие состояния алгоритмического процесса и понятие 
непосредственной переработки; оба этих понятия уточ¬ 
няются иа основе материала § 1.0: состояния суть конст¬ 
руктивные объекты, а непосредственная переработка (в слу¬ 
чае локального преобразования информации) задается на¬ 
бором локальных действий (см. § 1.2). 

Состояние вычисления (в смысле Колмогорова) для про¬ 
извольной вычислительной модели может не быть непосред¬ 
ственно конструктивным объектом. Для машины Тьюринга, 
например, ее полное состояние в каждый отдельный момент 
времени включает в себя информацию о записи на ленте, о 
положении головки и о внутреннем состоянии; для машины 
Поста надо знать запись на ленте, положение головки и ад¬ 
рес, или номер, подлежащей выполнению команды. Путем 
подходящих соглашений о способе кодирования можно, од¬ 
нако, оформить каждое такое состояние в виде конструк¬ 
тивного объекта и, более того, в виде объекта из некоторого 
единого (для рассматриваемой вычислительной модели) 
ансамбля. 

Рассмотрим, например, машины Тьюринга с данным ра¬ 
бочим алфавитом А. Тогда, закодировав каждое внутреннее 
состояние в виде некоторого слова подходящего алфавита 
Б, не пересекающегося с А, введя специальный символ для 
обозначения положения головки и т. д., можно оформить 
каждое состояние машины в виде слова в некотором фикси¬ 
рованном алфавите (включающем алфавиты А, Б и, если 
нужно, еще некоторые знаки) или в виде комплекса некото¬ 
рого фиксированного колмогоровского ансамбля. Если мы 
рассматриваем в качестве вычислительной модели машины 
Тьюринга с не фиксированным заранее рабочим алфавитом, 
го должны договориться о способе кодирования букв произ¬ 
вольного алфавита словами некоторого фиксированного ал¬ 
фавита и т. п. Во всех случаях такое «погружение» множест¬ 
ва полных состояний машины в некоторый ансамбль легко 

2 В. Л, Успенский, А. Л, Семенов 
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осуществить, и в дальнейшем мы будем предполагать его 
выполненным. 

1.1.1. X — К-алгоритмы. Полное описание всякого ал¬ 
горитма начинается с того, что фиксируются два ансамб¬ 
ля — «ансамбль X допустимых исходных данных (или допу¬ 
стимых входов)» и «ансамбль У допустимых результатов (или 
Допустимых выходов)». Ансамбль X называется ансамблем 
входов, а ансамбль У называется ансамблем выходов. Произ¬ 
вольный алгоритм с ансамблем входов X и ансамблем выхо¬ 
дов У кратко называется X — У-алгоритмом. Имеется в 
виду, что мы пытаемся применить X —г-алгоритм к каждо¬ 
му элементу X и что, если результат существует, он принад¬ 
лежит У. Областью определения, или областью применимо¬ 
сти, алгоритма является подмножество ансамбля входов; 
это подмножество состоит из всех тех входов, для которых 
алгоритм выдает результат. Каждый алгоритм задает функ¬ 
цию, определенную на его области применимости; значение 
функции на аргументе х равно результату алгоритма при 
входе х. Про такую функцию говорят, что она вычисляется 
рассматриваемым алгоритмом. Два алгоритма называются 
эквивалентными , если их области определения совпадают и 
для каждого входа из этой общей области совпадают соот¬ 
ветствующие результаты; эквивалентные алгоритмы, таким 
образом, вычисляют одну и ту же функцию. Пусть А и В 
суть некоторые множества. Если область определения алго¬ 
ритма 21 является подмножеством множества А и каждый 
результат 21 принадлежит В , то алгоритм 21 называется 
алгоритмом из А в В (пишем; «21; А-уВ»), 

Результат применения алгоритма 21 к исходному дан¬ 
ному х обозначается 21 (х). Таким образом, эквивалентность 
алгоритмов 21 и 23 может быть записана как 21 (х)~23 (х). 


§ 1.2. Представительные вычислительные модели 

1.2.0. Открытие, обсуждаемое в этом параграфе, за¬ 
ключается в указании точно очерченного и представитель¬ 
ного класса алгоритмов. Представительность означает 
существование таких ансамблей X, У , что рассматриваемы; 
класс содержит алгоритм, эквивалентный (т. е. определяю¬ 
щий ту же функцию) любому заранее заданному X — У 
алгоритму. 

Проблема существования таких классов глубоко нетри 
виальна. Априори не очевидно, что представительный класі 
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алгоритмов может быть описан в точных терминах и тракто¬ 
ваться как предмет изучения традиционной теоретико-мно¬ 
жественной математики. Исторически первыми примерами 
таких классов служат классы алгоритмов, осуществляемых 
на вычислительных моделях Тьюринга (см. [Тьюринг, 
1936], а также уточняющую критику в [Пост, 1947]) и Поста 
(см. [Пост, 1936]). Более поздние примеры — нормальные 
алгорифмы Маркова и алгоритмы, осуществляемые на ма¬ 
шинах Колмогорова (алгоритмы Колмогорова). 

1.2.1. Машины Колмогорова. Обратимся к цитате из 
[Колмогоров, 1953], приведенной нами в § 1.1. Определение 
машин Колмогорова (как и вообще всякой вычислительной 
модели, в том числе с нелокальным преобразованием инфор¬ 
мации) заключается в конкретизации входящих в эту ци¬ 
тату понятий. 

Состояниями объявляются комплексы из некоторого ан¬ 
самбля колмогоровских Б-комплексов. Фиксируется некото¬ 
рый показатель локальности г, тем самым возникает поня¬ 
тие г-локального действия. Для машины Г указывается 
оператор непосредственной переработки Пг. Оператор не¬ 
посредственной переработки задается конечным набором 
колмогоровских г-локальных действий о попарно раз¬ 
личными левыми частями в задающих эти действия 
строчках. 

Применение оператора к комплексу 5 состоит в примене¬ 
нии того (ровно одного) действия из этого набора, которое 
оказывается применимым; если ни одно из действий непри¬ 
менимо, то и оператор неприменим. Задаваемые таким обра¬ 
зом преобразования комплексов мы и будем называть ло¬ 
кальными операциями (в интуитивном смысле этот термин 
уже появлялся в § 1.1). Теперь можно сказать, что в маши¬ 
нах Колмогорова непосредственная переработка является 
локальной операцией. Работа машины заключается в после¬ 
довательном переходе от начального состояния Л° к состоя¬ 
нию Л^ЙгИ®), от состояния А 1 к состоянию Л ? =Пг(Л*) 
и т. д., пока не возникнет сигнал окончания. Требуется, 
чтобы появление сигнала окончания задавалось локальным 
свойством. Если сигнал окончания возникает на состоя¬ 
нии А п , оператор йг применяется еще ровно один раз, ал¬ 
горитмический процесс прекращается и состояние Л л+ *== 
=Йг (Л”) объявляется результатом работы машины при ис¬ 
ходном данном Л®. 

Колмогоровский подход приводит (при несущественных 
изменениях в технических деталях) к алгоритмам из 

2 * 
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[Колмогоров, Успенский, 1958]; изложению этих алгорит¬ 
мов был посвящен §3 гл. 1 монографии [Глушков, 1964]. 

Определение Колмогорова естественно применимо и и 
алгоритмам, обрабатывающим (Б, /г)-комплексы. Для этого 
нужно заменить в определении оператора непосредствен¬ 
ной переработки колмогоровские действия на действия в ан¬ 
самбле (Б, к) -комплексов. С неформальной точки зрения ос¬ 
новное отличие получаемых так алгоритмов от алгоритмов, 
задаваемых описанными выше машинами Колмогорова, со¬ 
стоит в использовании ориентированных графов (с произ¬ 
вольным числом ребер, входящих в вершины графов одного 
ансамбля). Имея в виду это соображение, мы закрепляем 
за получаемыми вычислительными устройствами название 
«ориентированные машины Колмогорова». 

В 1970 г. Шёнхаге (см. [Шёнхаге, 1970]) предложил вы¬ 
числительную модель в виде « машин с модифицируемой па¬ 
мятью » (это предложенный в [Слисенко, 1981, гл. 3, § 1, 
п. 1] перевод термина Шёнхаге «зіога^е шосШісаііоп ша- 
сЬіпез», сокращенно 5ММ). Во введении к статье [Шёнхаге, 
1980] Шёнхаге пишет; «Как нам было указано многими кол¬ 
легами, Колмогоров и Успенский ввели в рассмотрение ма¬ 
шинную модель, весьма близкую к машинам с модифицируе¬ 
мой памятью, значительно ранее». Машины Шёнхаге можно 
рассматривать как специальный вид ориентированных ма¬ 
шин Колмогорова (несколько подробнее об этом будет ска¬ 
зано ниже), и поэтому для обозначения этих машин в обзо¬ 
ре [Слисенко, 1981] использовался термин « алгоритмы Кол¬ 
могорова — Шёнхаге» (тогда как для обозначения машин 
Колмогорова в [Слисенко, 1981] использовался термин 
«і алгоритмы Колмогорова — Успенского»). Возможно, было 
бы правильнее называть ориентированные машины Колмого¬ 
рова (а тем самым и алгоритмы Шёнхаге) алгоритмами о 
полулокальным преобразованием информации', действитель¬ 
но, при осуществлении одного шага работы алгоритма вновь 
появившаяся вершина может оказаться концом сколь 
угодно большого числа ребер. 

Определение машин с модифицируемой памятью, или 
машин Шёнхаге, приводится нами в добавлении к настоя¬ 
щему параграфу. Вкратце, основные отличия этой вычисли¬ 
тельной модели от ориентированных машин Колмогорова 
состоят в следующем; 1) помечены ребра, а не вершины; 
2) команды являются специальным видом команд ориен¬ 
тированных машин Колмогорова; 3) на командах задана 
управляющая структура с помощью линейного упорядоче- 
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ния команд и операторов перехода; 4) имеются входная и вы¬ 
ходная ленты (на которых записываются слова в алфавите 
{О, 1}) и соответствующие команды. 

Выше уже отмечалось, что определение алгоритмов, 
предложенное Колмогоровым, было призвано охватывать все 
другие виды алгоритмов. И действительно, машины Колмо¬ 
горова непосредственно моделируют работу других извест¬ 
ных видов алгоритмов с локальным преобразованием инфор¬ 
мации. Для алгоритмов с нелокальным преобразованием ин¬ 
формации, таких, как нормальные алгорифмы или машины 
с произвольным доступом к памяти (см. [Ахо, Хопкрофт, 
Ульман, 1974]), требуется предварительное разбиение их 
шагов на локальные шаги. 

Тезис о возможности прямого моделирования алгоритмов 
с локальным преобразованием информации машинами Кол¬ 
могорова может на первый взгляд вызвать возражения. 
Действительно, существование машины Колмогорова, не- 
посредственно^ моделирующей машину Тьюринга с плос¬ 
костной памятью («плоской лентой»), не является самооче¬ 
видным; доказательство такого существования требует весь¬ 
ма тонких построений. Так обстоит дело, например, при 
конструировании машины Колмогорова, решающей задачу 
«о распознавании самопересечения плоской траектории», 
см. [Кубинец, 1972]; существование же машины Тьюринга 
с плоской лентой, решающей эту задачу, очевидно. 

Дело здесь, однако, в том, что в действительности на 
вход рассматриваемой машины Тьюринга с плоской лентой 
подается не только аргумент, но и необходимая часть рабо¬ 
чей памяти, т. е. плоскости, стандартным образом разбитой 
на клетки. Это разбиение и возникающее в силу него отно¬ 
шение соседства клеток машина может использовать в своей 
работе. Если на вход машины Колмогорова подавать вместе 
с аргументом соответствующую часть плоскости, разбитой 
на клетки, то моделирование машины Тьюринга машиной 
Колмогорова становится очевидным. Тем не менее даже и 
без подачи на вход машины Колмогорова участка плоско¬ 
сти моделирование оказывается в некотором, уточняемом 
ниже, смысле возможным — машина Колмогорова оказы¬ 
вается в состоянии «достраивать» нужные участки памяти по 
ходу вычисления; как это делается, показано в [Шёнхаге, 
1980]. 

1.2.2. Формальные задания. Каждая вычислительная 
модель влечет за собой существование, определенного, спе- 
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цифичного для этой модели класса формальных заданий ал¬ 
горитмов, которые могут быть реализованы в этой модели. 
Например, говоря для начала несколько грубо, для нор¬ 
мальных алгорифмов Маркова роль формального задания 
играет схема нормального алгорифма, для машин Тьюрин¬ 
га — система команд, для машин Колмогорова — множе¬ 
ство команд вида 1/-+СФ, у). Дальнейшее уточнение поня¬ 
тия формального задания предполагает, что указанные схе¬ 
мы, системы и множества изображены в виде конструктив¬ 
ных объектов. 

Наше понятие формального задания совпадает, по су¬ 
ществу, с понятием изображения алгоритма, объясненном в 
[Нагорный, 19776] следующим образом: «Алгоритма изоб¬ 
ражение— конструктивный объект определенного вида... 
содержащий в себе закодированную по фиксированным для 
алгоритмов данного типа правилам полную информацию 
об этом алгоритме. Обычно определение изображения алго¬ 
ритма формулируется таким образом, чтобы процедуры по¬ 
лучения изображения алгоритма по исходному алгоритму и 
восстановления исходного алгоритма по изображению 
алгоритма осуществлялись по возможности более просто». 
В действительности для того чтобы объяснить какую-либо 
вычислительную модель, достаточно предъявить определен¬ 
ный Универсальный Рецепт, который по каждому формаль¬ 
ному заданию и по каждому входу позволяет получить соот¬ 
ветствующий выход. (Ср. формулировку из [Криницкий, 
1977а, § 0], толкующую понятность алгоритма «как знание 
того, что должно быть сделано для его исполнения, т. е. 
как наличие алгоритма выполнения алгоритма».) 

Если формальные описания и исходные данные разумным 
образом закодированы, пара (формальное описание, исход¬ 
ное данное) превращается в элемент подходящего ансамб¬ 
ля, а Универсальный Рецепт превращается в интерпретатор 
или даже — в случае представительной модели — в уни¬ 
версальный алгоритм (см. § 1.14). 

В соответствии с только что сказанным, вся дескриптив¬ 
ная теория алгоритмов может рассматриваться как теория 
единственного универсального алгоритма, построенного на 
основе определенной представительной модели. Казалось бы, 
различные универсальные алгоритмы могут приводить к 
различным теориям алгоритмов. Оказывается, однако, что 
это не такі теория алгоритмов единственна. Подтвержде¬ 
нием этой единственности служат теорема Роджерса об 
изоморфизме гёделевых нумераций и теорема Мучника 
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об изоморфизме вычислительных структур. Подробнее об 
этих теоремах будет сказано в § 1.14. 

Отметим те особенности, которые отличают формальное 
задание алгоритма вычисления на данной модели от интуи¬ 
тивного понятия алгоритма как предписания. Прежде все¬ 
го, как уже упоминалось, формальное задание должно быть 
конструктивным объектом; предписание же может тракто¬ 
ваться как смысл повелительного текста (тем не менее, как 
показывают приведенные выше примеры, формальные зада¬ 
ния, даже для одной и той же модели, не принадлежат, вооб¬ 
ще говоря, никакому единому ансамблю). Далее, формаль¬ 
ное задание касается только оператора непосредственной пе¬ 
реработки, в частности входная и выходная процедуры 
(см. ниже) не входят в формальное задание. 

Наконец, все предписания (даже если их понимать как 
тексты, а не как смыслы текстов), описывающие вычисле¬ 
ния на данной модели, могут содержать некоторую общую 
информацию. Например, для нормального алгорифма Мар¬ 
кова к такой информации относится указание о том, что 
формула подстановки применяется к самому вхождению. 
Для машин Тьюринга предписание содержит объяснение по¬ 
нятий «лента», «головка», «сдвиг влево» и т. д. Естественно, 
эта общая информация может не входить в формальное зада¬ 
ние конкретного алгоритма. 

1.2.3. Представительные модели. Пусть X, X 1 , У, У — 
ансамбли. В силу изоморфизма ансамблей каждый предста¬ 
вительный класс алгоритмов из X в У автоматически по¬ 
рождает представительный класс алгоритмов из Х ! в У 1 . 
Поэтому для дескриптивной теории алгоритмов (но не для 
теории сложности и не для конструкций специальных алго¬ 
ритмов) достаточно изучать только X — У -алгоритмы для 
произвольных, но фиксированных X и У. В частности, мож¬ 
но предполагать, что Х—У. В качестве X, далее, можно 
взять множество всех слов в каком-либо алфавите (в слу¬ 
чае однобуквенного алфавита это множество может интер¬ 
претироваться как множество N всех натуральных чисел 
(ср. [Роджерс, 1967, § 1.10])). 

Пусть задана вычислительная модель и пусть Хи У 
суть ансамбли. Договоримся о какой-либо входной процеду¬ 
ре (или правиле начала), с помощью которой любой элемент 
х ^ X вводится в модель в виде начального состояния (на¬ 
пример, о том, как число п 6 N преобразуется в начальное 
состояние машины Тьюринга.— о термине «состояние» см. 
выше § 1,1), и о какой-либо выходной процедуре (или 



40 


ЧАСТЬ ПЕРВАЯ. ОСНОВНЫЕ ОТКРЫТИЯ 


правиле извлечения результата), с помощью которой из за¬ 
ключительного состояния извлекается элемент у 6 V. Мы 
предполагаем, что эти процедуры преобразуют объект ло¬ 
кальным образом — в колмогоровских терминах они пред¬ 
ставляют собой однократное применение подходящих ло¬ 
кальных операций. Тогда любое допустимое для данной 
модели формальное задание алгоритма задает следующий 
алгоритм из X в У: берется элемент х и вводится в виде на¬ 
чального состояния, к получившемуся начальному состоя¬ 
нию применяется формальное задание, процесс применения 
продолжается до тех пор, пока не возникает заключительное 
состояние, из него извлекается у. Тем самым с вычислитель¬ 
ной моделью в целом оказывается сопряженным некоторый 
класс алгоритмов из X в У (который в силу предложенного 
описания является точно очерченным). В дальнейшем, рас¬ 
сматривая вычислительные модели, мы будем, для упроще¬ 
ния изложения, фиксировать соответствующие ансамбли 
X и К, при этом мы не будем упоминать о входной и выход¬ 
ной процедурах, считая, что они определены вычислитель¬ 
ной моделью и ансамблями входов и выходов. 

Итак, пусть дана вычислительная модель с ансамблем 
входов X и ансамблем выходов У. Если класс алгоритмов из 
X в У, связанный с этой моделью (и, следовательно, точно 
очерченный), является представительным (в том смысле, что 
для каждого X—К-алгоритма найдется эквивалентный ему 
алгоритм из этого класса), данная модель называется X— 
У-представительной. Модель называется представитель¬ 
ной, если она является X—^-представительной для некото¬ 
рых X, У. Вычислительные модели Тьюринга и Поста служат 
исторически первыми примерами представительных мо¬ 
делей. (Машины Поста являются N—[^-представительными, 
а машины Тьюринга — X—^-представительными, если X 
и У — словарные ансамбли.) 

Машины Тьюринга с фиксированным ленточным алфави¬ 
том и произвольным числом внутренних состояний также 
образуют представительную модель. Пример непредстави¬ 
тельной вычислительной модели — машины Тьюринга с 
фиксированным ленточным алфавитом и фиксированным 
числом внутренних состояний. Разумеется, всевозможные 
(ориентированные или неориентированные) машины Колмо¬ 
горова также составляют представительную модель. Более 
того, все колмогоровские машины, работающие в подходя¬ 
щем ансамбле Б-комплексов, образуют представительную 
модель, если алфавит Б содержит не менее четырех букв. 



§ 1.2. ПРЕДСТАВИТЕЛЬНЫЕ ВЫЧИСЛИТЕЛЬНЫЕ МОДЕЛИ 41 

Важно понимать, что представительные вычислитель¬ 
ные модели не являются формализациями понятия алгорит¬ 
ма: оии только обеспечивают подъездные пути для формали¬ 
зации понятия вычислимой (посредством какого-либо алго¬ 
ритма) функции. В самом деле, если бы мы объявили, что 
алгоритмами являются только те, которые реализуются ма¬ 
шинами Тьюринга, то нормальные алгорифмы Маркова нель¬ 
зя было бы рассматривать как алгоритмы, и для них мы не 
смогли бы измерять, скажем, сложность вычисления. 

Машины Колмогорова могут рассматриваться, таким об¬ 
разом, в двух аспектах: 

1) как одна из представительных вычислительных моде¬ 
лей; 

2) как математическое определение общего понятия ал¬ 
горитма — в том смысле, что любой алгоритм с локальны¬ 
ми шагами непосредственно подпадает под это определение 
(этот второй аспект выделяет машины Колмогорова среди 
всех прочих представительных моделей). 

1.2.4. Тезис Чёрча. Утверждение о представительности 
точно очерченного класса алгоритмов (т. е. о представитель¬ 
ности соответствующей вычислительной модели) составляет 
содержание тезиса Чёрча для этого класса или для этой 
модели. Таким образом, мы понимаем этот тезис в широком 
смысле (как в [Роджерс, 1967, § 1.7]). Тезис Чёрча в узком 
смысле утверждает, что всякая вычислимая функция с на¬ 
туральными аргументами и значениями частично рекурсивна 
(см. [Клини, 1952, § 63]). Эту формулировку, строго говоря, 
следовало бы назвать тезисом Чёрча — Клини, поскольку 
первоначальная формулировка Чёрча говорит лишь о всю¬ 
ду определенных вычислимых функциях и утверждает их 
общерекурсивность (см. [Клини, 1952, §60]). Тьюринг в 
ІТьюринг, 1936] и Пост в [Пост, 1936] утверждают, что 
класс всех всюду определенных функций, вычислимых в 
определенной модели, совпадает с классом всех всюду опре¬ 
деленных вычислимых функций (для фиксированных ан¬ 
самблей). Поэтому тезис Чёрча может быть назван тезисом 
Тьюринга, или тезисом Поста, или тезисом Чёрча — Тью¬ 
ринга — Поста. Вспоминая роль Клини в формулировании 
этого тезиса — переход к частичнорекурсивным функ¬ 
циям,— можно также называть его тезисом Чёрча — Тью¬ 
ринга — Поста — : Клини. 

1.2.5. Языки программирования. Роль адекватных фор¬ 
мализаций понятия алгоритма могут играть и так называе¬ 
мые языки программирования: действительно, эти языки 
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могут быть использованы для задания точно очерченного и 
представительного класса алгоритмов. При этом не каждый 
осмысленный текст на языке программирования нужно обя¬ 
зательно понимать как алгоритм! существенно лишь, чтобы 
каждый алгоритм мог быть записан на языке. 

Для математика, занимающегося теорией алгоритмов, 
среди языков программирования наибольший интерес пред¬ 
ставляют лисп Маккарти и алгол-68 ван Вейнгаардена. 
Можно строить и так называемые абстрактные языки про¬ 
граммирования, выступающие в качестве математических 
моделей реальных языков программирования; эти абстракт¬ 
ные языки, в свою очередь, также можно рассматривать как 
формальные описания понятия алгоритма. Среди абстракт¬ 
ных языков программирования выделяем язык операторных 
алгоритмов А. П. Ершова (см. [Ершов А., 1960], [Ершов А,, 
1962]); эти алгоритмы под названием «вычислительные алго¬ 
ритмы» были изложены впервые в феврале — марте 1958 г. 
в докладе А. П. Ершова на семинаре П. С. Новикова и 
С. А. Яновской в Московском университете. 

Добавление к § 1.2. Машины Шёнхаге 

Здесь мы приводим подробное описание этих машин, 
следуя [Шёнхаге, 1980]. Состояния каждой машины яв¬ 
ляются конструктивными объектами определенного рода. 
Начнем с описания этих объектов. Как мы уже замечали, 
это (Б, к) -комплексы, у которых алфавит Б состоит из одной 
буквы (тем самым можно считать, что вершины комплекса 
не помечены вовсе) и из каждой вершины выходит ровно 
к ребер. Шёнхаге называет их Д-структурами. Приведем 
определение Д-структуры из [Шёнхаге, 1980]. Пусть задан 
конечный алфавит Д. Его элементы называются направле¬ 
ниями (имеется в виду аналогия с направлениями переме¬ 
щения головки машины Тьюринга) и играют роль, анало¬ 
гичную роли чисел 1,..., к —1 в определении (Б, ^-комп¬ 
лексов. Д -структура — это конечный ориентированный 
граф, из каждой вершины которого выходит одно и то же 
количество ребер, помеченных взаимно однозначным обра¬ 
зом элементами Д; одна из вершин выделена и называется 
начальной вершиной, или центром, Д-структуры, и все вер¬ 
шины достижимы по ориентированным путям из этого 
центра. 

Говоря несколько более формально, Д -структура — 
это тройка {X, а, р), где X конечное множество вершин, 
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« 

а € X — центр, р= {/? а |а е Д } — семейство отображений X 
в X, причем р а ( х) — это вершина, в которую из вершины 
х идет ребро, помеченное направлением а. Обозначим через 
Д* множество всех слов в алфавите Д, через □ — пустое 
слово. Для всякой Д-структуры 3=(Х, а, р) отображение 
А 5 : Л*->Х определено следующим образом: 

(□) = «, 

ЛА^)^ Р а(А 3 {Щ), «6 А, ^А*. 

Если А 5 (Щ=х, то № называется адресом вершины х (в 
Д-структуре 5). Определение Д-структуры требует, чтобы 
все вершины имели адреса. 

Машина Шёнхаге имеет входную и выходную ленты с го¬ 
ловками на них, на лентах записываются слова в алфавите 
{О, 1}. Кроме того, имеются рабочая память, которая в 
каждый момент работы машины является некоторой Д- 
структурой, и, наконец, программа — конечная последова¬ 
тельность команд описываемых ниже типов. Каждая ко¬ 
манда может быть либо операцией, либо проверкой, либо 
остановом. Смысл команды останов очевиден. Операции 
подразделяются на операции над входной лентой, выходной 
лентой и рабочей памятью. Операция над входной лентой 
одна — сдвиг головки на один символ вправо. Операций 
над входной лентой две — печать символа 0 или 1 в конце 
уже напечатанного на выходной ленте слова. 

Операции над рабочей памятью бывают одного из трех 
типов. Мы опишем, как команды каждого из типов преоб¬ 
разуют Д-структуру 8=(Х, а, р) в новую Д-структуру 

5 = <Х, а, р). 

1. Команда добавления новой вершины пе\ѵ ѴР, где 
\Ѵ С Д*. Новое множество вершин состоит из элементов X 
и еще одной — новой — вершины, обозначим ее у. Для всех 
бе А полагаем (г/)=о 1 Если №=□, то а=у и при всех 

6 ^ Д, х € X значение рь (х) задается как совпадающее с 
Рв(х). В терминах теории графов: к имеющемуся графу до¬ 
бавляется новая вершина, она объявляется начальной, и все 
ребра, которые должны выходить из этой вершины, ведут 
в старую начальную вершину. Пусть теперь № имеет вид 
Ѵа, где 1} € Д*, а С А. Тогда а—а, р а {А$Ф))—У\ Для всех 
г^Х, А, если гфА 3 (Ц) или б^=а, полагаем р й (г)= 
~Рб(г). В терминах теории графов: добавляется новая вер¬ 
шина, все ребра из нее идут в начальную вершину, одну и 
ту же и в старом, и в новом графе, а в новую вершину ведет 
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ровно одно ребро, это ребро помечено направлением а и 
исходит из вершины с адресом V. 

2. Перенос начальной вершины зеі □ іо V. Полагаем 
а=А 8 (Ѵ), к X относим вершины, достижимые из вершины а 
по путям, определяемым_семейством р._После этого опреде¬ 
ляем р как семейство {/? а | а € А}, где р а получается суже¬ 
нием р а на X. 

3. Поворот_ребра зеі Ѵа. Іо V, где V, А*, а € А. По¬ 
лагаем а=а, р а {А 8 (Ѵ))=А 8 {Ѵ), не меняя р&(г) при дру¬ 
гих б, г. В терминах теории графов: единственное возмож¬ 
ное отличие получающейся А-структуры от 5 состоит в том, 
что ребро, помеченное направлением а, ведет из вершины с 
адресом 0 в вершину с адресом V, а не в ту вершину, куда 
оно шло в структуре 5. После этого, как и в команде второ¬ 
го типа, оставляем лишь достижимые вершины и соответ¬ 
ственно сужаем отображения р&. 

После выполнения операции происходит переход к вы¬ 
полнению следующей в программе команды; если такой нет, 
то машина останавливается. 

Всякая проверка имеет вид іі Р Шеп р еізе ѵ, где р, ѵ — 
натуральные числа, не превосходящие числа команд в про¬ 
грамме, а Р — предикат одного из следующих двух видов: 

1) А 8 (Ц)—А 8 (Ѵ), что означает совпадение вершин с ад¬ 
ресами I/ и У А-структуры 5; 

2) іприі *= Р, что означает совпадение считываемого сим¬ 
вола с Р, где Р есть 0 или 1 или символ конца входной ленты. 
В результате выполнения проверки память не меняется и 
происходит переход к команде, имеющей в программе но¬ 
мер р, если Р истинен, и к команде, имеющей номер ѵ, 
если Р ложен. 

Работа машины начинается с выполнения первой коман¬ 
ды программы, головка на входной ленте ставится на первый 
символ, память представляет собой А-структуру с единст¬ 
венной вершиной — центром. 

§ 1.3. Общее понятие исчисления 

как самостоятельное (отдельное) понятие 

1.3.0. Общее понятие исчисления, или дедуктивной систе¬ 
мы 1 ), столь же фундаментально, как и понятие алгоритма, 
и должно рассматриваться отдельно от каких бы то ни было 


И) См. [Маслов, 1986], 
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формальных уточнений. Понятие исчисления отражает и 
обобщает интуитивное представление об индуктивном по¬ 
рождении множества ([см. Маслов, 1967], [Эббинхауз, 
1970], [Маслов, 1979]). Математические истоки понятия 
исчисления восходят к древности (см. [Яновская, 1962]). 
Игры с четкими правилами: шахматы, домино, маджонг, 
различные карточные игры были, вероятно, первыми реаль¬ 
ными примерами исчислений. (Разумеется, рассматривая 
игру как исчисление, мы полностью отвлекаемся от ее «игро¬ 
вых» аспектов — состязательности и прочего,— а интере¬ 
суемся исключительно ее, так сказать, «юридической сторо¬ 
ной» — возможностью совершать действия, выполняемые по 
определенным правилам.) 

Дифференциальное исчисление и интегральное исчисле¬ 
ние могут считаться примерами исчислений, если тракто¬ 
вать их как процедуры, позволяющие порождать верные 
равенства вида 

йР (х) = / (х) йх и ^ Н.х)йх—Р (х), 

отправляясь от исходных, или «табличных», равенств и при¬ 
меняя такие правила, как правило дифференцирования 
сложной функции, правило интегрирования по частям 
и т. п. Значительную роль в развитии общего понятия ис¬ 
числения сыграли исчисления математической логики, или 
логистические системы. Первые логистические системы по¬ 
явились в конце XIX века в работе Фреге (см. [Фреге, 
1879]). 

Общее понятие исчисления менее популярно, чем общее 
понятие алгоритма; в частности, совсем не изучено общее 
понятие исчисления о локальным преобразованием инфор¬ 
мации. Возможно, причина такой дискриминации — в дав¬ 
лении вычислительной практики. Терминология, относя¬ 
щаяся к исчислениям (за исключением относящейся к специ¬ 
альным видам исчислений), не устоялась, и авторы должны 
были лавировать между Сциллой терминологического 
новаторства и Харибдой терминологической путаницы. 

Грубо говоря, исчисление есть конечный список « разре¬ 
шительных » правил, называемых также порождающими 
правилами (см. [Шанин, 1955, § 1]) или правилами вывода. 
Эти правила разрешают переходить от одних конст¬ 
руктивных объектов к другим (в то время как правила алго¬ 
ритма повелевают совершать такие переходы). 

Типичным примером «разрешительных» правил служат 
правила шахматной игры, причем в роли конструктивных 
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объектов, которыми правила оперируют, выступают шах¬ 
матные позиции, снабженные указанием об очередности 
хода и еще некоторой дополнительной информацией 1 ). 

Позицию, дополненную всей необходимой для примене¬ 
ния правил игры информацией, естественно называть со¬ 
стоянием игры. Именно состояния игры следует рассмат¬ 
ривать как те конструктивные объекты, над которыми со¬ 
вершаются операции шахматного исчисления. 

Другой пример — игра домино. Состояние пары здесь 
слагается из расположения костей на столе, информации 
о наличии костей у игроков и в куче и информации об оче¬ 
редности хода. Как и в шахматах, правила дают возмож¬ 
ность переходить от рассматриваемого состояния к одному 
из нескольких непосредственно следующих. 

Подобно тому как алгоритм задает алгоритмический, 
или вычислительный, процесс (т. е. процесс работы алгорит¬ 
ма), каждое исчисление задает исчислительный, или порож¬ 
дающий, процесс, т. е. процесс работы исчисления. Этот 
процесс разбивается на отдельные шаги {этапы согласно 
[Шанин, 1955, § 1]). Каждый шаг состоит в получении нового 
объекта из уже полученных к началу этого шага объектов; 
получение нового объекта осуществляется путем примене¬ 
ния произвольного «разрешительного» правила, входя¬ 
щего в данное исчисление. Объекты, к которым применяет¬ 
ся правило, называются его посылками. Заметим, что при¬ 
менение одного и того же правила к одним и тем же посылкам 
может давать разные результаты; правило может приме¬ 
няться различным образом. (Например, имеется правило 
хода пешки — ио оно может применяться к разным пеш¬ 
кам.) Однако, если фиксировать правило и посылки, число 
различных результатов оказывается всегда конечным. 
Для каждого правила число посылок фиксировано. Если 
вее такие числа ограничены числом к, исчисление назы¬ 
вается к-посылочным. Все приведенные примеры игр яв¬ 
ляются однопосылочными исчислениями. 

Отражением интуитивного представления об объектах, 
получающихся в процессе работы исчисления, является по- 


1 ) {Шахматный Кодекс СССР, 1969, ст. 16] именует му дополни¬ 
тельную информацию «внутренними возможностями позиций», а [Шах¬ 
матный Кодекс, 1981, ст. 12} — «возможностями игры». Дело в том, что 
знания одной только позиции, т. е. расположения фигур на доске, и 
даже очередности хода недостаточно для применения правил игры: 
необходимо, например, знать еще, ходил ли ранее король и кое-что 
другое. 
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нятие допустимого (для данного исчисления) объекта. 
Определение этого понятия индуктивное. 

Если объект Ь получается из а*, ..., а к применением од¬ 
ного из «разрешительных» правил исчисления и если а*, . .. 
.. а к являются допустимыми объектами, то и & объявляет¬ 
ся допустимым; это есть шаг индуктивного определения. 
Начало индукции обеспечивается нульпосылочными правила¬ 
ми: если Ь удовлетворяет такому правилу (т. е. получается 
применением этого правила «из ничего»), то Ъ объявляется 
допустимым. Если нульпосылочных правил нет, множество 
допустимых объектов оказывается пустым. В шахматной 
игре нульпосылочным является правило, задающее началь¬ 
ное состояние, т. е. начальную позицию с соответствующими 
начальными «внутренними возможностями» (очередной ход 
за белыми, король не ходил и т. д.). В логистических исчисле¬ 
ниях в силу нульпосылочных правил объявляются доказуе¬ 
мыми аксиомы. 

Всякое исчисление работает с объектами некоторого ан¬ 
самбля называемого рабочей средой исчисления. Все со¬ 
стояния исчислительного процесса лежат в Ш. Совокуп¬ 
ность всех возможных состояний игры (шахмат, домино) 
легко погружается в подходящий ансамбль. Работа исчис¬ 
ления заключается в образовании все новых и новых допу¬ 
стимых элементов рабочей среды, или допустимых состоя¬ 
ний. Принципиальная разница между алгоритмическим и 
исчислительным процессами лежит в следующем. В алго¬ 
ритмическом процессе каждое возникающее состояние од¬ 
нозначно предопределено предшествующим ходом процесса, 
в исчислительном же процессе возникающее состояние 
является всего лишь одним из многих возможных допускае¬ 
мых предшествующим ходом процесса. Если понятие вре¬ 
мени связывать с чередованием событий (а событие здесь — 
появление нового состояния), то можно сказать, что в алго¬ 
ритмическом процессе время течет линейно, а в исчисли¬ 
тельном процессе — разветвленно. 

Историю появления данного допустимого состояния в 
исчислительном процессе можно запечатлеть в виде особо¬ 
го объекта, называемого выводом. Этот объект можно пред¬ 
ставлять себе расположенным в пространстве. Вывод дан¬ 
ного допустимого состояния х — это дерево, во всех вер¬ 
шинах которого находятся какие-то допустимые состояния 
и всем вершинам поставлены в соответствие правила исчис¬ 
ления так, что: 

1) в корне находится х и 
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2) для всякой вершины ѵ дерева, если у — состояние, 

находящееся в этой вершине, а у х . у к — все состояния, 

находящиеся в тех вершинах, куда идут ребра из ѵ, то у 
получается из у и по правилу, сопоставленному с 

вершиной ѵ. 

(Таким образом, пометки на листьях дерева получены в 
силу нульпосылочных правил.) Для однопосылочных исчи¬ 
слений получаемые так выводы оказываются цепями. 

Продолжая уточнять наши представления об исчисле¬ 
ниях, мы обнаруживаем, что конечный список «разреши¬ 
тельных» правил образует хотя и важнейшую, но лишь одну 
из составных частей исчисления (он составляет, так ска¬ 
зать, «ядро» исчисления — подобно тому, как оператор не¬ 
посредственной переработки составляет «ядро» алгоритма. 

Второй составной частью служит инструкция о разделе¬ 
нии элементов на основные и вспомогательные. Наличие этих 
двух составных частей во всяком исчислении явно отмечено 
в іЦейтин, 1964]. Мы будем называть эту инструкцию пра¬ 
вилом выделения основных состояний. Необходимость в таком 
правиле вызвана тем, что нас могут интересовать не все 
допустимые состояния, а лишь состояния специального 
вида (они-то и называются основными), тогда как другие 
состояния рассматриваются лишь как вспомогательное сред¬ 
ство для получения основных состояний. Роль правила вы¬ 
деления основных состояний для исчислений аналогична 
роли сигнала о получении решения для алгоритмов. 

Наконец, третьей составной частью исчисления являет¬ 
ся правило извлечения результата, или выходная процеду¬ 
ра. Эта процедура аналогична выходной процедуре из § 1.2. 
Выходная процедура преобразует каждое основное состоя¬ 
ние в некоторый объект. Результат применения выходной 
процедуры к произвольному допустимому основному объек¬ 
ту называется результатом, или выходом исчисления. 
Про всякий такой объект будем также говорить, что он 
порождается исчислением. Про множество всех объектов, 
порождаемых исчислением, также будем говорить, что оно 
порождается исчислением. Два исчисления эквивалентны, 
если они порождают одно и то же множество. Предполагает¬ 
ся, что множество, порождаемое исчислением, расположено 
в некотором ансамбле — ансамбле выходов рассматриваемого 
исчисления. Поясним все сказанное на двух примерах. 

Шахмат ный пример. Цель — построение ис¬ 
числения, порождающего всевозможные патовые позиции на 
шахматной доске. В качестве «разрешительных» правил 
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берем правила игры в шахматы. Основными объявляем па¬ 
товые состояния (здесь важно вспомнить, что в состояние 
игры включена и очередность хода). Выходная процеду¬ 
ра — переход от состояния к позиции (т. е. отбрасывание 
всей дополнительной информации). 

Логистический пример. Дель — построе¬ 
ние исчисления, порождающего всевозможные доказуемые 
формулы какой-либо фиксированной логистической систе¬ 
мы (иначе — формальной аксиоматической теории). Пусть 
Б — алфавит этой системы. Мы предполагаем известными 
обычные правила образования (они же правила построе¬ 
ния) и правила преобразования (они же правила вывода), 
согласно которым переменные (п), термы (т), формулы (ф) 
и доказуемые формулы (д) выделяются среди всех слов в 
алфавите Б (поскольку Б конечен, а количество переменных 
бесконечно, переменные суть некоторые слова, а не просто 
буквы). Теперь строим наше исчисление. Состояния в нем 
имеют вид (а, Ь), где а есть одна из букв «п», «т», «ф» или «д», 
а Ь есть слово в Б; все такие состояния вкладываются в под¬ 
ходящую рабочую среду. Основными объявляются состоя¬ 
ния вида <д, &>. Правило извлечения результата — переход 
от <д, Ь) к Ь, Разрешительные правила получаются очевид¬ 
ной модификацией упомянутых выше правил образования и 
преобразования. Так, правилу, гласящему, что всякая пе¬ 
ременная есть терм, соответствует однопосылочное правило, 
разрешающее переход от любого состояния вида (п, Ь) 
к состоянию (т, Ь) с тем же Ь; правилу заключения соответ¬ 
ствует двупосылочное правило, разрешающее переход от 
<д, Ьі) и (д, (й г ->& г )) к (д> Ь % ). Аксиомам соответствуют 
нульпосылочные правила! для всякой аксиомы Ь разре¬ 
шается «из ничего» сконструировать порожденный объект 
(д, Ь). Правило суперпозиции термов, дающее по термам 
іі и і 2 новый терм и, приводит к двупосылочному правилу, 
разрешающему переход от (т, іі) и (т, і 2 ) к (т, и). Если среди 
правил преобразования было, скажем, правило подстанов¬ 
ки, которое по доказуемой формуле /, переменной х и тер¬ 
му і дает новую доказуемую формулу § (пр едставляющую со¬ 
бою результат подстановки і в } вместо всех свободных вхож¬ 
дений переменной л:), то в наше исчисление должно быть 
включено трехпосылочное правило, обеспечивающее воз¬ 
можность перехода от состояний (д, /), (п, х ), (т, і ) к состоя¬ 
нию <д, ц). 

Последний пример показывает, что нет необходимости в 
принудительном отнесении порождаемых объектов к тому 
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или иному типу (согласно [Шанин, 1955, § 1]) или к той или 
иной ступени (согласно [Маслов, 1979]): информацию о типе 
объекта можно «упрятать» внутрь подходящим образом вы¬ 
бранного состояния. Так, вместо того чтобы порождать от¬ 
дельно термы и отдельно (но с помощью термов) формулы, 
мы совместно порождали объекты вида (т, Ь) и (ф, Ь). 

Одни из правил, образующих исчисление, задают те или 
иные преобразования (или, короче, являются преобразова¬ 
ниями); таковы правила вывода, правило извлечения ре¬ 
зультата. Другие правила задают свойства (или, короче, 
являются свойствами); таковы правила выделения основ¬ 
ных состояний. 

Что можно сказать о природе всех этих правил? В об¬ 
щем случае, по-видимому, ничего, кроме того, что они долж¬ 
ны быть достаточно просты. Аналогично обстоит дело и в 
случае алгоритмов — в общем случае мы ничего не можем 
сказать о природе правила непосредственной переработки 
или правила окончания. Однако для алгоритмов колмогоров¬ 
ского типа, т. е. алгоритмов с локальным преобразованием 
информации, мы можем сказать, что первое из этих правил 
представляет собою локальную операцию, а второе — ло¬ 
кальное свойство. 

Сходным образом мы подойдем и к исчислениям с ло¬ 
кальным преобразованием информации. Типичный пример 
таких исчислений — ассоциативные исчисления и грамма - 
тики математической лингвистики (см. добавление к на¬ 
стоящему параграфу, а также [Клини, 1952, § 71], [Глад¬ 
кий, 1973], [Гладкий, 1977], [Стоцкий, 1980]). Большинство 
логистических исчислений йе являются исчислениями с ло¬ 
кальным преобразованием информации: правила вывода в 
них, как правило, нелокальны (см. выше логистический 
пример). Однако, как и в случае алгоритмов, нелокальные 
шаги можно расщепить на локальные, т. е., по существу, 
заменить одно исчисление (нелокальное) на другое (локаль¬ 
ное), эквивалентное исходному. Общий вид исчисления с ло¬ 
кальным преобразованием информации (или исчисления 
колмогоровского типа) легко получается конструкцией по¬ 
рождающей модели, аналогичной машинам Колмогорова. 
Сейчас мы к этому и перейдем. 

Итак, даем определение понятия исчисления с локальным 
преобразованием информации или, другими словами, ис¬ 
числения колмогоровского типа. Рабочей средой будем счи¬ 
тать некоторый ансамбль (Б, к )-комплексов или колмогоров¬ 
ских Б-комплексов. От выходной процедуры мы требуем, 
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чтобы она представляла собой локальную операцию (см. 
§ 1.2), от правила выделения основных состояний — чтобы 
оно было локальным свойством. Каждое из «разрешитель* 
ных» правил должно быть локальным действием в том 
смысле, как это было определено в § 1.0. 

Отдельного рассмотрения требует случай нульпосылоч- 
ных разрешительных правил — правил «вывода из ничего». 
Дело в том, что локальные действия могут применяться к 
комплексам, а то «ничто», к которому применяется нуль- 
поеылочное правило, не есть комплекс. Мы будем считать, 
что каждое нульпосылочное правило объявляет допустимым 
(т. е. «разрешает вывести из ничего») некоторый фиксиро¬ 
ванный комплекс. Таким образом, допустимыми в силу 
нульпосылочных правил будет лишь конечное число 
комплексов (не больше, чем имеется нульпосылочных пра¬ 
вил). 

В случае ^-посылочного правила при к ^ 1 «разреши¬ 
тельное» правило, как уже отмечалось, должно представ¬ 
лять собой локальное действие (в смысле § 1.1)і надо толь¬ 
ко (при к> 1) кортеж комплексов аи . . ., к которому 
применяется правило, сперва представить в виде одного 
комплекса (нового, «более богатого» ансамбля — как это 
указано в § 1.0). 

Простое, но существенное замечание! каждый ансамбль 
порождается некоторым исчислением (а значит, и исчисле¬ 
нием колмогоровского типа). 

О помощью общего понятия исчисления можно глубже 
осмыслить многие фундаментальные понятия и результаты 
математической логики. В частности, знаменитая теорема 
Гёделя о полноте утверждает, что все истинные формулы 
логики предикатов первого порядка, т. е. все законы эле¬ 
ментарной логики предикатов, могут быть порождены не¬ 
которым исчислением; именно в этом — суть теоремы. 
С чисто математической точки зрения конкретное построе¬ 
ние такого обладающего «свойством полноты» исчисления 
имеет уже второстепенное значение (удовлетворяющих 
условию теоремы полных исчислений — бесконечное коли¬ 
чество). (Сточки зрения истории науки представляет инте¬ 
рес тот факт, что полное исчисление предикатов было уга¬ 
дано логиками за несколько десятилетий до теоремы Гё¬ 
деля.) 

Другая знаменитая теорема Гёделя — теорема о непол¬ 
ноте — утверждает, что множество всех истинных формул 
арифметики (а значит, и множество всех общезначимых фор- 
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мул логики предикатов второго порядка) не может быть 
порождено никаким исчислением. 

На базе понятия исчисления, по существу, можно изло¬ 
жить всю (по крайней мере, дескриптивную) теорию алго¬ 
ритмов (см. [Цейтин, 1964]). 

1.3.1. Исчисления со входом. В заключение параграфа — 
об исчислениях со входом. Каждое исчисление можно рас¬ 
сматривать не только как инструмент для образования не¬ 
которого множества, а именно порождаемого множества, но 
и как инструмент для преобразования одних множеств в 
другие. Пусть, в самом деле, дано исчисление © с рабочей 
средой ѴР, множеством основных объектов ТсШ и порож¬ 
даемым множеством Р, лежащим в некотором ансамбле У. 
Фиксируем некоторый ансамбль X — ансамбль входов —■ 
и некоторую входную процедуру а, преобразующую элемен¬ 
ты X в элементы ѴУ (в случае исчислений с локальным пре¬ 
образованием информации от процедуры а требуется, чтобы 
она была локальной операцией). 

Рассмотрим теперь произвольное множество ЛсХ и 
соответствующее а(Л)с: №. Объявим все элементы из 
а (Л) допустимыми — с тем, чтобы эти новые допустимые эле¬ 
менты включились в индуктивный процеев образования до-, 
пустимых элементов. Шаг индукции, таким образом, ие 
меняется, но меняется начало индукции! допустимыми 
объявляются не только результаты применения нульпосы- 
лочных правил, но и все элементы из а (Л). Новое расширен¬ 
ное множество допустимых объектов обозначим через фд . 
К элементам пересечения () А П Т применяем правило извле-. 
чения результата и получаем множество Р А ^Р. Подобная 
ситуация имеет место, в частности, когда к формальной ак¬ 
сиоматической теории добавляются аксиомы (Л), которые 
преобразуются этой теорией в расширенное множество тео¬ 
рем Р А ; способ ввода а здесь — тождественное преобразо¬ 
вание. 

Описанная только что процедура задает некоторую опе 
рацию, приводящую от Л к Р А ; это Р А естественно обозна¬ 
чить символом (5 (Л). В последнем обозначении в значе 
ние символа включена информация о процедуре вво¬ 
да а; так понимаемое называется исчислением сс 
входом. 

Каждое исчисление со входом © задает, таким образом 
свою исчислишльную операцию: Л->-6(Л). Оказывается 
что класс исчислительных операций совпадает с классов 
вычислимых операций (см. §1.13).- 
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Посредством исчислений со входом можно также зада¬ 
вать бинарные отношения. Именно, исчисление (5 задает 
отношение 

#сг;=±{<л:, у> | 6({х})Э|/}. 

Всякое заданное таким образом множество пар может быть 
порождено некоторым исчислением. 

Добавление к § 1.3. Алгебраические нримеры 

Понятие исчисления имеет глубокие связи с алгеброй. 
Мы обозначим сейчас три линии таких связей. 

Во-первых, аксиомы, задающие тот или иной вид ал¬ 
гебраических систем (полугрупп, колец, упорядоченных 
групп и т. д.), записаны, как правило, на узком (иначе — 
элементарном, первого порядка) языке логики предикатов. 
Этим аксиомы алгебры отличаются от аксиом топологии, 
формулируемые в языке теории множеств или в преди¬ 
катной логике высших типов. Поэтому, в силу теоремы Гё¬ 
деля о полноте, множество всех элементарных (т. е. записан¬ 
ных на том же элементарном языке) следствий тех или иных 
алгебраических аксиом (скажем, аксиом теории групп) мо¬ 
жет быть получено как множество, порожденное исчисле¬ 
нием предикатов. Последнее надо при этом понимать как 
исчисление со входом и на вход подавать как раз рассмат¬ 
риваемые аксиомы (здесь следствие аксиом теории групп по¬ 
нимается как утверждение, верное во всех группах). 

Во-вторых, некоторые исчисления, исторически возни¬ 
кающие вне связи с алгеброй, а именно формулируемые ниже 
ассоциативные исчисления Туэ, имеют ясное алгебраическое 
содержание. (Как мы увидим, всякое ассоциативное исчис¬ 
ление в алфавите Б задает на множестве слов алфавита Б, 
рассматриваемом как полугруппа, некоторую конгруэн¬ 
цию.) 

Наконец, в-третьих, для некоторых конечнопорожден- 
ных алгебраических систем (а именно для всех систем, за¬ 
даваемых квазитождествами, см. ниже) удается непосред¬ 
ственно построить очень простое исчисление, позволяющее 
получать все следствия из квазитождеств (в частных слу¬ 
чаях из тождеств, из равенств), задающих рассматриваемую 
систему. (Здесь следствие понимается как утверждение, вер¬ 
ное во всех алгебраических системах данного вида, имею¬ 
щих данное множество образующих, и поэтому теорему 
Гёделя автоматическим образом применить не удается.) 
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Далее мы не будем касаться намеченной выше первой 
линии, развитием которой является большая область мате¬ 
матической логики — теория моделей, а сосредоточимся на 
второй и третьей. Начнем мы с исчислений Туэ, приведших 
их открывателя к постановке алгоритмических проблем ал¬ 
гебры, о которых пойдет речь в §2.1. Туэ рассматривает 
конечные ряды знаков <2еісЬепгеіЬеп>, молчаливо предпо¬ 
лагая, что они непусты; в дальнейшем это ограничительное 
предположение было отброшено. Мотивировки рассмотре¬ 
ний Туэ были философские — он интересовался способами 
формальных записей понятий <Ве§гШеп> и возможностью 
комбинаторных преобразований одних понятий в другие, 
эквивалентные (см. [Туэ, 1910]). 

Мы изложим построения Туэ, пользуясь вместо термина 
«ряд знаков» современным термином «слово в алфавите Б». 
Туэ начинает с того, что выписывает два кортежа непустых 
слов А я В, состоящие соответственно из слов Л*,. . .,А Л 
и Ві,. . .,В п . Два слова і/ и V в алфавите Б называются 
эквивалентными (относительно пары А, В), если для неко¬ 
торого т ^ 1 существует такая последовательность слов 
С*,. . .,С т , что Сі=(У, С т =Ѵ и для каждого і= 1,. . . 

..., т —1 найдется такое {1.. • . ,п }, что С і+І получается 
из С г заменой некоторого вхождения А; на В } или заменой 
некоторого вхождения В і на А } . Проницательный читатель 
уже сообразил, что Туэ изобрел исчисления некоторого 
специального вида со входом. Правило исчисления гласит: 

если V —допустимое слово и при некотором/ € {1, ...,«} 
слово V получается из Ц заменой какого-то вхождения 
на В, или В; на А іг то V допустимо. 

Итак, в исчислении присутствует одно однопосылочное 
правило, хотя это правило можно было бы разбить на не¬ 
сколько, введя свое правило замены для каждого отдельного 
/. Остается разобраться, что здесь будет рабочей средой, 
основными состояниями и выходной процедурой. Рабочая 
среда проста — это ансамбль Б-слов, все состояния основ¬ 
ные, выходная процедура, как и во всех алгебраических 
примерах, которые мы будем рассматривать, тривиальна, 
она не меняет объекта. 

Так 'задаваемые исчисления называются теперь ассо¬ 
циативными исчислениями (сам Туэ не употреблял этого 
термина), а определенная выше эквивалентность называет¬ 
ся эквивалентностью в заданном ассоциативном исчисле¬ 
нии (см. [Нагорный, 1977а]). Это отношение эквивалентно¬ 
сти является конгруэнцией на полугруппе Б-слов, т. е. 
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выдерживает умножение справа и слева на элементы этой 
полугруппы. Фактор-полугруппа по этому отношению на¬ 
зывается полугруппой, заданной системой образующих Б и 
системой определяющих соотношений А)—В], /=1,. . ,,т. 
Замечательный и простой факт состоит в следующем. 

Два произведения образующих равны в этой подгруппе 
тогда и только тогда, когда они равны во всех полугруппах, 
в которых выполнены соотношения Л^=В^, /== 1,. . ,,т. 
Более того, получившаяся конгруэнция на полугруппе Б- 
слов может быть порождена весьма простым исчислением. 
Выпишем исчисление, стремясь породить множество, со¬ 
стоящее из всех тех равенств І1=Ѵ, для которых 0 и V 
конгруэнтны. Правила исчисления гласят: 

1) Ѵ—Ѵ допустимо для любого И 6 Б*; 

2) если 11 =Ѵ допустимо и 11'^Ѵ при некотором /€ 

б {1. т} получается из Ц—Ѵ заменой некоторого вхож¬ 

дения А) на В) или В) на А } , то II'—V 1 допустимо. 

Остальные компоненты исчисления восстанавливаются 
без труда. 

В дальнейшем конструкция Туэ обобщалась в двух на¬ 
правлениях. Первое направление начинается о отказа от 
симметричности исчисления, т. е. в переходе к исчислению 
со входом со следующим правилом: 

если 17 — допустимое слово и при некотором / 

ё{1.т} слово V получается из і/ заменой какого-то 

вхождения А] на В } , то V — допустимо. 

Все остальное, как в системах Туэ. Получаются так на¬ 
зываемые полусистемы Туэ, введенные в [Пост, 1947], 
частным случаем которых являются системы Туэ. Затем 
было введено разделение алфавита Б на множество основ¬ 
ных и вспомогательных символов, и основными считались 
только состояния, являющиеся словами в алфавите основ¬ 
ных символов. Если к тому же перейти к рассмотрению ис¬ 
числений без входа, но зато, дополнительно, о одним нуль- 
посылочным правилом, то получится определение грамматик 
(см. [Гладкий, 1973], [Стоцкий, 1980]). 

Второе направление — это обобщение ситуации на бо¬ 
лее широкий класс алгебраических систем, чем полугруп¬ 
пы, и на более широкий класс соотношений, чем равенства 
произведений образующих. Но тут нам придется сперва по¬ 
заботиться о терминологии. 

Алгебраические системы; алгебры. Естественным источ¬ 
ником задач и полем приложений теории алгоритмов ока¬ 
зывается алгебра. Подробнее об этих задачах и приложе- 
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ниях мы скажем в § 2.1, сейчас же, говоря об исчислениях, 
мы объясним, откуда исчисления берутся в алгебре. Начнем 
с чисто алгебраических определений. Сигнатурой называет¬ 
ся множество символов, разбитое на два подмножества: 

1) множество функциональных имен, для каждого из ко-, 
торых указано натуральное число — валентность (число 
аргументов); 

2) множество предикатных имен, для каждого из кото¬ 
рых также указана его валентность. 

Имена валентности п называются также п-местными 
(функциональными, предикатными) именами. Функцио¬ 
нальные имена валентности нуль называются также пред¬ 
метными именами. Сигнатуры, если не оговорено против¬ 
ное, будем предполагать конечными. 

Алгебраической системой сигнатуры о называется произ¬ 
вольное непустое множество М — носитель алгебраической 
системы — вместе с отображением (называемым интерпре¬ 
тацией), сопоставляющим с элементами сигнатуры их зна-' 
чения (в определяемой алгебраической системе): значением' 
«-местного функционального имени служит «-местная опе¬ 
рация на М (значение предметного имени — элемент М), 
значением «-местного предикатного имени служит «-мест-, 
ное отношение на М. Если в сигнатуре присутствуют толь¬ 
ко предикатные и предметные имена, алгебраическая систе¬ 
ма называется реляционной, если только функциональные 
(в том числе предметные) имена, алгебраическая система 
называется операционной. Операционные системы назы¬ 
ваются также алгебрами. 

Замкнутый терм данной сигнатуры а определяется 
так: пусть / есть «-местное функциональное имя из о, ' 
тогда: 

при «=0 / — замкнутый терм, 

при «>0, если іі,. . .,і п — замкнутые термы, то и , 
. ,,і п ) —замкнутый терм. 

Таким образом, замкнутые термы — это некоторые кон-: 
структивные объекты, а именно специального вида слова в 
алфавите функциональных имен, двух скобок и запятой. ’ 
Более естественно представлять замкнутые термы в виде (Б, 
^-деревьев, где Б — алфавит функциональных имен, к — * 
максимальная валентность функционального имени (см. 

§ 1 - 0 ). ; 

В дальнейшем мы предполагаем, что в сигнатуре непре- <• 
менно присутствуют предметные имена и потому множество" 
всех замкнутых термов рассматриваемой сигнатуры непу-,:; 
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сто. В таком случае множество всех замкнутых термов дан¬ 
ной сигнатуры а легко превратить в алгебраическую систе¬ 
му этой сигнатуры. Для этого нужно значением всякого 
«-местного функционального имени / из а объявить: 

при «=0 — само /; 

при « >- О— отображение, перерабатывающее всякий на¬ 
бор іі,. . -А в /А,. . .А). 

Значениями всех предикатных имен объявим тождест¬ 
венно ложные отношения. Полученную алгебраическую си¬ 
стему назовем свободной алгебраической системой, порож¬ 
денной сигнатурой а. Таким образом, то, что обычно назы¬ 
вается свободной алгеброй сигнатуры р с образующими 
йі,. . ,,а ( , мы называем свободной алгеброй, порожденной 
сигнатурой о=рц{аі,. . .,а с }. 

Понятным образом (индуктивно) для всякой сигнатуры 
а, всякого замкнутого терма I этой сигнатуры и всякой ал¬ 
гебраической системы В этой сигнатуры определено значе¬ 
ние 1 в В. Пусть система В такова, что всякий элемент ее 
носителя является значением некоторого замкнутого терма 
сигнатуры а. Тогда В называется алгебраической системой, 
порожденной сигнатурой а. Таким образом, произвольная 
группа с образующими а*. а с является в нашей термино¬ 

логии алгебраической системой, порожденной сигнатурой 

{а,. а { , о, - *}, а также сигнатурой {е, а*,. . .,а г , о, -1 }. 

Всякая алгебраическая система, порожденная сигна¬ 
турой а, является гомоморфным образом свободной алге¬ 
браической системы, порожденной сигнатурой о. 

Равенства. Фиксируем некоторую сигнатуру а. Равен¬ 
ствами сигнатуры а будем называть выражения вида 

1 = 8 , 

где 1,$ — замкнутые термы сигнатуры а. Замкнутыми атом¬ 
ными формулами сигнатуры а будем называть равенства 
этой сигнатуры, а также все выражения вида р(іі,. . - А), 
где р есть «-местное предикатное имя, іі,. . -А суть замк¬ 
нутые термы сигнатуры а. Пусть задана совокупность ра¬ 
венств 5 и замкнутая атомная формула Р. Будем говорить, 
что Р является (семантическим) следствием совокупности 
5, если во всякой алгебраической системе, порожденной сиг¬ 
натурой а, в которой выполнены все элементы 5, выполне¬ 
на также и Р. Заметим, что здесь, как и дальше, наше по¬ 
нятие следствия расходится со стандартным. 

При стандартном понимании следствие определяется 
при помощи класса всех алгебраических систем данной 
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сигнатуры. Для нас же в данном контексте важны именно 
системы, порожденные этой сигнатурой, только они и прини¬ 
маются в расчет при определении следствия. (Впрочем, 
именно в случае равенств наше понятие следствия равно¬ 
объемно стандартному, в аналогичной ситуации о квази¬ 
тождествами дело будет обстоять не так.) 

Обозначим через С (а, 3) класс всех алгебраических си¬ 
стем, порожденных сигнатурой а, в которых выполнены все 
равенства из 5. По определению, в любой алгебраической 
системе, принадлежащей С (а, 5), выполнены также и все 
следствия из 5. Оказывается, в С (а, 8) существует и един¬ 
ственна такая система ЭД (а, 5), в которой среди замкнутых 
атомных формул выполнены только следствия из 5; все же 
остальные системы из С (о, 5) являются гомоморфными об¬ 
разами 31 (а, 5). Система 31 (а, 5) называется алгебраической 
системой, порожденной сигнатурой о и заданной совокуп¬ 
ностью равенств 3. Эта система, в свою очередь, является 
фактор-системой свободной алгебраической системы, по¬ 
рожденной сигнатурой а по следующему отношению кон¬ 
груэнции: два элемента свободной системы конгруэнтны 
тогда и только тогда, когда равенство между ними является 
следствием совокупности 5. 

То, что обычно называют алгеброй сигнатуры р с обра¬ 
зующими ах,. . .,а ( и совокупностью определяющих соотно¬ 
шений 8, мы, в силу данных определений, называем ал¬ 
геброй, порожденной сигнатурой рІІ{оі,. . .,а г } и заданной 
совокупностью 8. 

Пусть теперь совокупность 5 конечна. Тогда алгебраи¬ 
ческая система, заданная совокупностью 5, часто называет¬ 
ся конечноопределенной. Мы также будем использовать этот 
термин. В этой ситуации множество всех семантических 
следствий из 5 (а значит, и соответствующая конгруэнция) 
может быть порождено исчислением, очень просто получаю¬ 
щимся из совокупности 5. Правила этого исчисления та¬ 
ковы: 

1) допустимо всякое равенство і—1\ 

2) если равенство і=з допустимо, а равенство и—ѵ или 
ѵ=и принадлежит 5, то равенство, получающееся из і=з 
заменой некоторого вхождения и на ѵ, допустимо. 

Для полного задания исчисления нужно указать рабо¬ 
чую среду, правило выделения основных состояний, вы¬ 
ходную процедуру. В нашем случае все они очевидны: рабо¬ 
чая среда — подходящий ансамбль, содержащий все 





равенства данной сигнатуры, все состояния основ ны е вы . 
ходная процедура оставляет любой объект неизменным. 

В описанной ситуации часто используется и другое ис¬ 
числение (на этот раз исчисление со входом), связанное с со¬ 
вокупностью 5. Его рабочей средой является какой-либо 
ансамбль, содержащий множество всех термов сигнатуры 
а. Разрешительное правило его таково: если равенство и—ѵ 
или ѵ—и принадлежит 5, то в допустимом элементе можно 
заменить вхождение и на ѵ. Легко проверить, что термы 4 и 
і ^ лежат в одном классе упомянутой в предыдущем абзаце 
конгруэнции тогда и только тогда, когда і % принадлежит 
множеству, получаемому применением рассмотренного ис¬ 
числения к {Іі }. 

Установленные зависимости между понятиями семанти¬ 
ческого следствия и выводимости в некотором исчислении 
являются иллюстрациями как к формулировке, так и к ме¬ 
тоду доказательства теоремы Гёделя о полноте. 

Тождества и квазитождества. Итак, мы описали, что та¬ 
кое задание алгебраической системы конечной совокуп¬ 
ностью равенств и в чем состоит исчислительный смысл та¬ 
кого задания. Однако встречаются ситуации, когда алге¬ 
браические системы задаются иначе, скажем совокупностью 
тождеств. Например, свободная группа с двумя образую¬ 
щими, т. е. некоторая алгебра, порожденная сигнатурой 
{е, а, Ь, о, г 1 }, задается совокупностью тождеств 
(Хог/)о 2 =Хо(уо 2 ), 
хое—х, 
еох=х, 
ха (х~ 1 )=е, 

(х-^ох—е. 

Тождества являются более общим видом соотношений, 
чем равенства; в них наряду с предметными именами (в част¬ 
ности, символами образующих, если эти символы включены 
в сигнатуру) допускаются и предметные переменные, про¬ 
бегающие носитель алгебраической системы. 

Еще более общий, чем тождества, вид соотношений воз¬ 
никает, когда выполнение некоторого свойства требуется не 
от всех элементов алгебраической системы, а только от 
удовлетворяющих каким-то условиям. Например, некото¬ 
рая упорядоченная группа сигнатуры {е, а, о, - 1 , может 
быть задана так: 

1) тождества группы, выписанные выше, 

2 ) х~^х, 

3 ) 



60 


ЧАСТЬ ПЕРВАЯ. ОСНОВНЫЕ ОТКРЫТИЯ 


4) х~^ у&у^х^-х = у, 

5) х^у =>хог^уог, 

6 ) х^у=>гох^гоу, 

7) а^е. 

Мальцеву принадлежит описание широкого класса ал¬ 
гебраических систем, для которых конструктивное задание 
посредством формул некоторого языка тесно связано со 
структурой алгебраической системы. Более точно, мальцев- 
ские соотношения (квазитождества), как мы увидим, пред¬ 
ставляют собой просто иначе записанные правила исчисле¬ 
ния, позволяющего порождать конгруэнцию, определяю¬ 
щую нужную алгебру. 

Сейчас мы, следуя [Мальцев, 1961], [Мальцев, 1970], 
дадим соответствующие определения. Пусть фиксирована 
конечная сигнатура а. Выше, говоря о равенствах, мы опре¬ 
делили замкнутые (т. е. не содержащие переменных) термы 
и замкнутые атомные формулы. Теперь мы введем более 
широкие классы объектов. 

Термы отличаются от замкнутых термов только тем, что 
в их состав могут входить таким же образом, как предмет¬ 
ные имена, еще и переменные (специально подобранные ком¬ 
бинации символов) из некоторого бесконечного списка. 
Атомные формулы отличаются от замкнутых атомных фор¬ 
мул тем, что в их определении роль замкнутых термов иг¬ 
рают термы. Квазитождеством (в заданной сигнатуре а) 

назовем всякое выражение вида с ^ ф ^ ^ где Ф — 

конечное множество атомных формул, а 9 — это атомная 
формула. Конкретизацией квазитождества назовем вся¬ 
кий результат подстановки каких-нибудь замкнутых термов 
вместо всех переменных в квазитождество. Заметим сразу 
же, что тождество, т. е. просто атомная формула й (в ча¬ 
стности, равенство), во всякой алгебраической системе эк¬ 
вивалентно квазитождеству х = х=з-Э. 

Говорят, что квазитождество выполнено в алгебраичес¬ 
кой системе, если в этой системе выполнена каждая его кон¬ 
кретизация. Замкнутая атомная формула Р называется 
(семантическим) следствием совокупности квазитождеств 
5, если во всякой алгебраической системе, порожденной сиг¬ 
натурой о, в которой выполнены все квазитождества из 5, 
формула Р также выполнена. Будем говорить, что алгебраи¬ 
ческая система В задается совокупностью квазитождеств 8, 
если для всякой замкнутой атомной формулы истинность ее 
в В эквивалентна тому, что эта формула является следст- 
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вием совокупности 5. В случае, когда 5 состоит из равенств 
(или эквивалентных им квазитождеств), это определение 
совпадает с данным выше определением алгебраической си¬ 
стемы, заданной совокупностью равенств. Если совокуп¬ 
ность 5 конечна, то задаваемая ею алгебраическая система 
называется конечнозаданной. 

Оказывается, для всякой совокупности квазитождеств 5 
существует и единственна порожденная сигнатурой а ал¬ 
гебраическая система §1 (о, 5), задаваемая этой совокуп¬ 
ностью; причем всякая система, порожденная о, в которой 
выполнены все квазитождества из 5, является гомоморфным 
образом системы §( (о, 5). 

Рассмотрим пример. Пусть совокупность 5 содержит 
тождества группы и еще некоторые дополнительные равен¬ 
ства в сигнатуре группы с какими-нибудь образующими. 
Тогда в обычной терминологии §1 (о, 5) есть группа, задан¬ 
ная (или определенная) этими образующими и равенствами. 
Если число равенств конечно, мы, в соответствии с обычной 
терминологией, будем называть группу конечноопределен¬ 
ной. Аналогичная терминология используется для полу¬ 
групп, колец и т. п. 

Пусть теперь совокупность 5 конечна, а сигнатура не 
содержит предикатных имен, т. е. алгебраические системы 
являются алгебрами. Мы опишем некоторое исчисление, 
позволяющее получать все следствия из 5, и одновременно 
получим описание алгебры, задаваемой совокупностью 5. 
Почти та же конструкция годится и в случае любых конеч¬ 
ных сигнатур, но мы ее не приводим из-за ее громоздкости. 

Приведем правила исчисления; в них мы пишем посылки 
над чертой, заключение под чертой и подразумеваем, что 
всякое правило начинается словами «для любых термов р, 
<7, г, 5...» 

Правила, отвечающие определению конгруэнции; 


г,, І — 5, 5 ■— Т 

У ~ 1 = г'" > 

Л\ _ * — и ~° -. 

' результат замены в (==$ любого 
вхождения и на о 

Правило, обеспечивающее выполнение квазитождеств 
из 5: для всякой конкретизации и^Ѵх &. . Д и к ~ѵ к ->- 
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->ы ь+1 =у ь+І квазитождества из 5 

иь+і = ѵ к+ і 

Обозначим через §1 свободную алгебру, порожденную 
сигнатурой о. Выписанное выше исчисление задает бинарное 
отношение на 81; термы и и ѵ находятся в этом отношении, 
если равенство и—ѵ допустимо. Это отношение, как легко 
видеть, является конгруэнцией, т. е. эквивалентностью, со¬ 
храняющейся при операциях из сг. Фактор-алгебра алгебры 
81 по этой конгруэнции и оказывается алгеброй, заданной 
совокупностью 5. 

§ 1.4. Представительные порождающие модели 

Открытие здесь состоит в самой возможности предъ¬ 
явить класс исчислений, одновременно точно очерченный и 
представительный, т. е. содержащий исчисление, эквива¬ 
лентное любому наперед заданному исчислению. (Чтобы 
быть более точными, мы должны были бы говорить не о 
представительной, а об У-представительных порождающих 
моделях. Пусть У — некоторый ансамбль; порождающая 
модель называется У -представительной, если для любого 
исчисления, порождающего подмножество ансамбля У, 
существует исчисление данной модели, порождающее то же 
подмножество.) Понятие порождающей модели возникает 
таким же образом, как и понятие вычислительной модели. 

Канонические системы Поста представляют собой самый 
ранний пример представительной модели. Однако канони- 
ческиесистемы 1 ) (см. [Пост, 1943], [Маслов, 1964], [Минский, 
1967, § 12.5 и § 13.2]) являются исчислениями с нелокальным 
преобразованием информации — в противоположность нор¬ 
мальным системам ? ) Поста (см. [Поет, 1943], [Марков, 
1954, гл. VI, §4], [Маслов, 1964], [Минский, 1967, гл. 13]), 
которые также образуют представительную порождающую 
модель, но с локальным преобразованием информации. 

Еще один пример представительной модели — граммати¬ 
ки (см. [Гладкий, 1973], [Стоцкий, 1980]). Данное в § 1.3 
описание исчислений колмогоровского типа может также 
рассматриваться как некоторая представительная порож- 


1 ) Канонические исчисления по терминологии [Маслов, 1986, 
гл. 2, § 1]. 

*) Нормальным исчислениям по терминологии [Маслов, 1986, 
ГЛ. 2, § 2]. 



§ 1.8. СВЯЗИ МЕЖДУ АЛГОРИТМАМИ И ИСЧИСЛЕНИЯМИ 


63 


дающая модель (ср. сказанное в § 1.2 о двух аспектах, в ко¬ 
торых могут рассматриваться машины Колмогорова). Ут¬ 
верждение о представительности точно очерченного класса 
исчислений (т. е. о представительности соответствующей 
порождающей модели) составляет содержание тезиса По¬ 
ста для этого класса или для этой модели. Названный те¬ 
зис был впервые сформулирован для нормальных систем в 
[Пост, 1943]. Тезис Поста играет ту же роль для исчисле¬ 
ний, что и тезис Чёрча для алгоритмов. Он так же, как и 
тезис Чёрча, может служить основой для включения де¬ 
скриптивной теории алгоритмов и исчислений в обычную 
теоретико-множественную математику (см. [Цейтии, 1964]). 

Для исчислений, как и для алгоритмов, можно опреде¬ 
лить понятие формального задания и указать для каждой 
порождающей модели свой Универсальный Рецепт. Для фик¬ 
сированной порождающей модели Универсальный Рецепт 
позволяет породить все пары, образованные формальным 
заданием некоторого исчисления рассматриваемой модели 
и произвольным выходом этого исчисления. После соответ¬ 
ствующей кодировки Универсальный Рецепт превращается 
в универсальное исчисление (см. § 1.14). 

§ 1.5. Выяснение связей между алгоритмами 

и исчислениями 

1) Для каждого алгоритма существует исчисление, по¬ 
рождающее область определения этого алгоритма. Более 
того, 2) для каждого алгоритма §1 можно указать исчисле¬ 
ние, порождающее те и только те пары ( х , у), для которых 
81 (х)=у. С другой стороны, 3) для каждого исчисления су¬ 
ществует алгоритм, область определения которого совпадает 
с множеством, порождаемым исходным исчислением, и 4) 
каждое исчисление, порождающее униформное (т. е. функ¬ 
циональное) множество пар ( х , у), может быть преобразо¬ 
вано в алгоритм, переводящий каждый х в тот у, для кото¬ 
рого пара {х, у) порождается исчислением. 

Далее, 5) для каждого алгоритма, распознающего при¬ 
надлежность к какому-либо множеству, расположенному 
в некотором ансамбле, существует исчисление, порождаю¬ 
щее это множество. Наконец, 6) каждое исчисление может 
быть заменено алгоритмом, результатами которого служат 
в точности те объекты, которые порождаются исходным 
исчислением. Более того, 7) при условии, что такие объекты 
вообще существуют (т. е. что порождаемое множество не- 
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пусто), всегда можно добиться, чтобы областью определе¬ 
ния получающегося алгоритма служил натуральный ряд. 

Нам хотелось бы еще раз подчеркнуть, что понятия ал¬ 
горитма и исчисления понимаются авторами в самом общем 
неформальном смысле. Многие теоремы теории алгоритмов, 
в частности все теоремы этого параграфа, можно сформули¬ 
ровать и доказать, используя только интуитивное понима¬ 
ние, без ссылок на вычислительные или порождающие мо¬ 
дели, хотя, конечно, они могут быть доказаны и для под¬ 
ходящих вычислительных моделей. Эта ситуация в некото¬ 
рой степени типична» многие теоремы о множествах или на¬ 
туральных числах можно сформулировать и доказать без 
обращения к каким-либо формальным (в частности, аксио¬ 
матическим) понятиям. 

Попытаемся теперь выяснить глубинные причины, при¬ 
водящие к наличию столь жестких связей между алгорит¬ 
мами и исчислениями. 

Начнем с того, что понятие алгоритма сводится к по¬ 
нятию исчисления. Подчеркнем, что здесь мы имеем в виду 
не сведение понятия вычислимости к понятиям породимо- 
сти или перечислимости, а сведение понятия произвольного 
алгоритмического процесса к понятию порождающего про¬ 
цесса. Сведение это имеет место в силу следующих сообра¬ 
жений. В § 1.3 объяснялось, каким образом исчисление со 
входом применялось к множеству объектов подходящего ан¬ 
самбля. Чтобы описать алгоритм в терминах исчислений со 
входом, нужно» применить это исчисление к одному вход¬ 
ному элементу (а точнее, к одноэлементному входному мно¬ 
жеству), обеспечить детерминированность такого процесса, 
т. е. однозначность каждого следующего шага, обеспечить 
однозначность момента остановки процесса. 

Для исчисления со входом, сопоставляемого таким обра¬ 
зом с произвольным алгоритмом, оказывается верным сле¬ 
дующее» все правила этого исчисления однопосылочные, к 
основному состоянию никакое правило неприменимо, к 
вспомогательному состоянию применимо не более одного 
правила, и применение правила дает однозначно определен¬ 
ный результат. 

Итак, все алгоритмы могут трактоваться как специаль¬ 
ного вида исчисления со входом. Заметим здесь же, что так 
называемые недетерминированные алгоритмы также полу¬ 
чают естественную трактовку в терминах исчислений со 
входом. Именно, недетерминированный алгоритм — это 
исчисление со входом 6, для которого все перечисленные 
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выше условия на исчисление, ставящееся в соответствие ал 
горитму, выполнены со следующим исключением: к вспомо^ 
гательному состоянию может быть применимо любое число 
правил. Фиксируем некоторое основное состояние е и рас¬ 
смотрим множество {л:|е €©({*})}. Это множество назы¬ 
вается множеством, распознаваемым недетерминированным 
алгоритмом @. 

Таким образом, само понятие алгоритма возможно све¬ 
сти к понятию исчисления. Обратное сведение имеет место 
лишь в смысле сведения понятия породимого множества к 
понятию вычислимой функции. Процесс порождения объек¬ 
тов заданным исчислением разворачивается как бы в вет¬ 
вящемся времени; проблема состоит в том, чтобы перейти 
от ветвящегося времени к последовательному, в ходе кото¬ 
рого некоторый бесконечный алгоритмический процесс по¬ 
следовательно воспроизведет все объекты, порождаемые 
данным исчислением, и только их. 

Этот процесс можно представлять как последовательное 
добавление к (первоначально пустому) списку элементов, 
относительно которых уже установлена их породимость, 
некоторых новых элементов. Процесс оказывается возмож¬ 
ным в силу конечности числа правил всякого исчисления и 
возможности алгоритмически построить по данному пра¬ 
вилу и списку посылок список всех (а их обязательно ко¬ 
нечное число) результатов применения рассматриваемого 
правила к этим посылкам. Располагая описанием процесса, 
нетрудно сконструировать, например, алгоритм, который 
перерабатывает всякое натуральное число п в п -й элемент 
списка элементов, порождаемых рассматриваемым исчис¬ 
лением (ср. теорему 7) из перечня в начале настоящего па¬ 
раграфа). 

В силу сказанного тезисы Чёрча и Поста не независимы: 
из тезиса Чёрча для произвольной вычислительной модели 
вытекает тезис Поста для некоторой порождающей модели и 
обратно — из тезиса Поста для любой порождающей модели 
вытекает тезис Чёрча для некоторой вычислительной модели. 


§ 1.6. Время и емкость как сложности вычисления 
и порождения 

1.6.0. Каждое реальное вычисление осуществляется: 
а) в физическом Времени, имея определенную длитель¬ 
ность; 


3 В. А. Успенский, А. Л. Семенов 
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б) в физическом Пространстве, занимая определенное 
место. 

Чтобы формализовать наши интуитивные представления 
о длительности и месте, мы должны прежде всего фиксиро¬ 
вать некоторую вычислительную модель. Затем мы должны 
указать способ измерения длительности вычисления на этой 
модели и способ измерения занимаемого им места. Эти меры 
длительности и места суть функции от входа (т. е. исход¬ 
ного данного) вычисления. Они называются временем и 
емкостью. Следуя традиции, мы предполагаем, что значения 
времени и емкости являются натуральными числами. 

При определении понятий вычислимой функции и поро- 
димого множества (см. § 1.7), как и для всей основываю¬ 
щейся на этих понятиях дескриптивной теории, выбор вы¬ 
числительной модели не играет существенной роли. Иначе 
обстоит дело в метрической теории при определении слож¬ 
ности вычисления и порождения. Различные модели могут 
отражать существенно различные аспекты реальных вычис¬ 
лительных и порождающих процессов и потому приводить 
к различным временным и емкостным функциям. В част¬ 
ности, в (абстрактных) машинах той или иной вычислитель¬ 
ной модели могут выделяться входное устройство, служащее 
для считывания входа (исходного данного), и выходное уст¬ 
ройство, служащее для постепенного выписывания выхода 
(результата). Если такие устройства выделены, место, за¬ 
нимаемое входом и выходом, обычно не учитывается при 
определении емкости. Таким образом, вычисление, скажем, 
тождественной функции х і-> х может (при разумной органи¬ 
зации вычислений) иметь нулевую или близкую к нулю ем¬ 
кость. Если же входное и выходное устройства не выделе¬ 
ны или, даже при их выделении, размеры входа и выхода 
учитываются при подсчете емкости, вычисление тождест¬ 
венной функции не может иметь емкость, меньшую, чем эти 
размеры. 

1.6.1. Машины Тьюринга. Большая часть всех полу¬ 
ченных к настоящему времени результатов о времени и ем¬ 
кости относится к многоленточным машинам Тьюринга. 

В понимании того, что такое даже обычная одноленточ¬ 
ная машина Тьюринга, в литературе наблюдается разнобой. 
Сам Тьюринг в своей знаменитой статье [Тьюринг, 1936] 
не дал достаточно точного описания своей машины. На это 
обратил внимание Пост в [Пост, 1947], предложивший свою, 
уже совершенно строгую, формулировку машины Тьюринга 
(не смешивать с машиной Поста, см. [Успенский, 1980]). 
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Пост признал, что его формулировка отличалась в деталях 
от (не сформулированного явно) понимания Тьюринга; в 
частности, у машины Тьюринга в формулировке Поста лен¬ 
та бесконечна в обе стороны. В [Пост, 1947, приложение] 
Пост пишет: «Принимая во внимание частые упоминания 
Тьюрингом начала ленты, а также то, каким способом его 
универсальная машина совершает движение влево, мы дога¬ 
дываемся, что лента у Тьюринга — в отличие от нашей лен¬ 
ты — представляет собой односторонне бесконечную штуку 
(аііаіг), простирающуюся вправо от начальной клетки». 

Имеются и другие, менее существенные расхождения, 
присущие различным формулировкам. Так, в указанной 
формулировке Поста (она же принята и в монографии 
[Мальцев, 1965]) за один шаг головка может либо напеча¬ 
тать один символ, либо сдвинуться на одну клетку, ио не 
может совершить оба действия сразу; в формулировке Кли- 
ни из [Клини, 1952, § 67], следующей в этом пункте перво¬ 
начальной формулировке Тьюринга, оба действия (движе¬ 
ние и печать) совмещаются в одном шаге. В дальнейшем, 
говоря об одноленточной машине Тьюринга, мы будем иметь 
в виду машину из [Клини, 1952, § 67], т. е. машину с одной 
потенциально бесконечной в обе стороны лентой и не имею¬ 
щую входных и выходных устройств; исходное данное за¬ 
писывается на этой единственной ленте, и на ней же обра¬ 
зуется результат. 

Во времена Тьюринга и Поста абстрактные машины были 
только одноленточными. Как уже отмечалось, теперь при 
исследовании сложности вычислений основным объектом 
являются многоленточные машины Тьюринга (см. [Успен¬ 
ский, 1960, § 14, п. 3], [Хопкрофт, Ульман, 1969, §6.5 и 
§ 10.2], [Ахо, Хопкрофгг, Ульман, 1974, § 1.6]). В каждой из 
таких машин имеется одна или несколько рабочих лент и 
по одной головке для каждой ленты; эти головки могут дви¬ 
гаться в обе стороны, читать и писать. Сами же ленты могут 
быть либо двусторонне бесконечными, как в [Успенский, 
1960] и в [Хопкрофт, Ульман, 1969, § 6.5], или же беско¬ 
нечными только вправо, как в [Хопкрофт, Ульман, 1969, 
§ 10.2] и в [Ахо, Хопкрофт, Ульман, 1974]. 

Кроме того, может иметься, а может и не иметься вход¬ 
ное устройство в виде входной ленты с читающей (толькоі) 
головкой. Так, в [Хопкрофт, Ульман, 1969, § 10.2] при об¬ 
суждении емкостной сложности рассматривается машина с 
входной лентой (названная в указанной книге «машиной 
рисунка 10. Ь), а при обсуждении временной сложности — 

3 * 
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машина без входной ленты (названная «машиной рисунка 
10.2»). Головка на входной ленте может иметь разрешенным 
как двустороннее движение (как в ІХопкрофг, Ульман, 
1969] и в [Ахо, Хопкрофт, Ульман, 1974]), так и односторон¬ 
нее (только вправо) движение (как в [Шёнхаге, 1980]). 
В последнем случае говорят о безвозвратной входной лен¬ 
те. Наконец, можно требовать наличия выходной ленты, 
головка на которой — только пишущая и движущаяся 
только вправо. (Попытка упорядочения терминологии, отно¬ 
сящейся к машинам Тьюринга, предпринята в § Д.З.) 

Ввиду сказанного следует договориться, что понимается 
в дальнейшем под многоленточной машиной Тьюринга. 
За исключением особо оговоренных случаев, мы принимаем, 
что многоленточная машина Тьюринга имеет бесконечные 
только вправо рабочие и выходную ленты и входную ленту 
с двусторонне движущейся головкой. (Таким образом, мно¬ 
голенточная машина Тьюринга с одной рабочей лентой — 
это не то же самое, что одноленточная машина Тьюринга!) 

Перейдем теперь к изложению некоторых понятий и ре¬ 
зультатов, относящихся к определенным только что много¬ 
ленточным машинам Тьюринга. Затем мы обсудим возмож¬ 
ность распространения этих определений и результатов на 
другие вычислительные модели. 

Итак, пусть задана некоторая многоленточная машина 
Тьюринга. Временем ее работы (на данном входе) назы¬ 
вается число шагов, выполняемых машиной до получения 
результата. Емкостью работы машины (на данном входе) 
называется максимальная длина использованного участка 
на рабочих лентах (максимум берется по всем рабочим лен¬ 
там и по всем моментам вычисления). Если вычисление не 
заканчивается, время и емкость считаются бесконечными. 

Первый же вопрос, возникающий в связи с этими опре¬ 
делениями, таков: существуют ли какие-нибудь связи меж¬ 
ду временем и емкостью? Эти связи легко найти: ясно, что 
никакое короткое вычисление не может использовать слиш¬ 
ком большую внутреннюю память и что никакое закончив¬ 
шееся вычисление с небольшой емкостью и небольшим вхо¬ 
дом не может быть продолжительным. Именно, для любой 
многоленточной машины Тьюринга существует такое число 
к, что емкость 5 и время Т (при работе на любом входе) 
удовлетворяют неравенствам 5^*7’ и (если I есть длина 
входа и 7'<оо) 

Нетривиальная теорема, связывающая время и емкость, 
таковаі для любой функции Т каждый предикат (т. е. функ- 
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ция с двумя значениями), вычисляемый на какой-нибудь 
многоленточной машине Тьюринга за время, не превосходя¬ 
щее Т (х) 1о§ Т ( х ) при исходном данном х, может быть вы¬ 
числен на некоторой (возможно, другой!) машине с емко¬ 
стью, не превосходящей Т (х) (см. [Хопкрофт, Пауль, Вэли- 
ант, 1977]). Отметим важную разницу между этой теоремой 
и двумя предыдущими оценками: оценки связывают время 
и емкость вычисления на одной и той же машине, а теорема 
говорит лишь, что если время работы некоторой машины не 
больше Т (х) 1о§ Т (х), то существует другая машина, вычис¬ 
ляющая тот же предикат с емкостью Т (х) (хотя, быть может, 
и с большим временем). 

Интересен также вопрос о том, каким образом измене¬ 
ние числа лент влияет на быстродействие машин. Очевидно, 
что любая функция, вычислимая на ^-ленточной машине за 
время Т(х), вычислима и на ш-ленточной машине при 
т>к за то же время (нужно просто не использовать лишние 
ленты). То же самое можно сказать, конечно, и про 
емкость. Таким образом, можно сказать, что вычисли¬ 
тельная сила машин не убывает с увеличением числа 
лент. 

Оказывается также, что различия во времени вычисле¬ 
ния на машинах с разным числом лент не так уж велики: 
любая функция, вычисляемая на какой-либо многоленточ¬ 
ной машине за время, не превосходящее Т{х), может быть 
вычислена на машине с одной рабочей лентой за время, не 
превосходящее с-Т(х) 2 , где с — некоторая константа. С ем¬ 
костью дело обстоит еще проще: всякая функция, вычисляе¬ 
мая на многоленточной машине с емкостью, не превосходя¬ 
щей 5 (х), может быть вычислена на машине с одной рабочей 
лентой с емкостью, не превосходящей с •$ (х), где с — неко¬ 
торая константа. 

1.6.2. Время. Обсудим теперь возможность определения 
понятий времени и емкости вычислений для других вычис¬ 
лительных моделей. Начнем с понятия времени как более 
простого. Процесс вычисления во всех известных вычисли¬ 
тельных моделях состоит из отдельных "шагов. Самый про¬ 
стой ответ на вопрос о том, что такое время, заключается 
в следующем: время есть число шагов в процессе вычисле¬ 
ния. Такая характеристика вычисления была впервые ис¬ 
следована Цейтиным (см. [Яновская, 1959, с. 44—45]). 
Именно, он рассматривал число (нелокальных) шагов рабо¬ 
ты нормального алгорифма. Исследования Цейтина, доло¬ 
женные им в ноябре 1956 г. на семинаре П. С. Новикова 
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и С. А. Яновской в Московском университете, были едва 
ли не самыми первыми исследованиями по метрической тео¬ 
рии алгоритмов вообще. 

Соответствует ли число шагов интуитивному понятию 
длительности вычисления? С определенной точки зрения — 
нет. Действительно, в практических вычислениях различ¬ 
ные шаги имеют разную длительность. Кроме того, при тео¬ 
ретических рассмотрениях такой способ измерения времени 
(как числа шагов) приводит к следующему нежелательному 
эффекту.» мы можем перестроить вычисление, объединяя не¬ 
которые последовательные шаги в один макрошаг, и полу¬ 
чить «новое» вычисление, которое на самом деле является 
старым, но имеет меньшее число шагов. Этот эффект исполь¬ 
зуется в так называемой теореме о линейном ускорении 
(см. следующий параграф). Более точно было бы определять 
время как сумму длительностей шагов. Такая точка зрения 
используется, например, при изучении вычислительных 
моделей с нелокальным преобразованием информации, в 
частности машин с произвольным доступом к памяти (см. 
[Ахо, Хопкрофт, Ульман, 1974, гл. 1]). 

В случае моделей с локальным преобразованием инфор¬ 
мации разница между обоими определениями времени — 
как числа шагов и как суммы их длительностей — не так 
уж велика; для фиксированного алгоритма они, очевидно, 
совпадают с точностью до ограниченного отделенного от 
нуля множителя. Именно с этой точностью и формулирует¬ 
ся большинство теорем о времени вычисления (среди упо¬ 
минающихся в этом обзоре теорем лишь теорема о линейном 
ускорении, см. § 1.7, представляет собой исключение). 
Определив время вычисления для различных вычислитель¬ 
ных моделей, естественно попытаться сравнить вычисления 
одной и той же функции на разных вычислительных моде¬ 
лях. (Для машин Тьюринга с разным числом лент такое 
сравнение проводилось выше в этом параграфе.) Приведем 
еще несколько результатов подобного рода. 

(1) Всякая функция, вычислимая на многоленточной ма¬ 
шине Тьюринга за время, не большее чем Т(х), может быть 
вычислена машиной Колмогорова за время, не большее чем 
с-Т(х), где с — некоторая константа. 

(2) Более того, всякая функция, вычислимая на машине 
Тьюринга с произвольным числом рабочих лент произволь¬ 
ной размерности за время, не превосходящее Т(х), может 
быть вычислена машиной Колмогорова за время, не превос¬ 
ходящее с>Т(х), где с — некоторая константа. 
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(3) Всякая словарная функция, вычислимая на машине 
Колмогорова за время, не превосходящее Т(х), причем 
Т (х) не меньше длины входа х, может быть вычислена на мно¬ 
голенточной машине Тьюринга с одной (одномерной) рабо¬ 
чей лентой за время, не превосходящее с-Т(х) 2,ъ , где о — 
некоторая константа. 

Результат (3) вытекает, в частности, из более тонкой 
оценки Т (х) 2 1о§ 8 Т (х), имеющейся в [Слисенко, 1981, гл. 3, 
§ 1, п. 3]. 

Результат (2) является усилением (почти тривиального) 
результата (1). Другой результат, близкий к результату 
(2), связывающий машины Тьюринга с алгоритмами колмо¬ 
горовского типа,— теорема Шёнхаге о возможности моде¬ 
лирования в реальное время (определение см. в добавлении 
к настоящему параграфу) всякой машины Тьюринга с без¬ 
возвратной входной лентой и многомерной памятью подхо¬ 
дящей машиной Шёнхаге — доказан в [Шёнхаге, 1980]. 
Как отмечено в [Слисенко, 1981, гл. 3, § 1, п. 1], аналогичный 
результат может быть получен и для моделирования машин 
Тьюринга с безвозвратной входной лентой и многомерной 
памятью машинами Колмогорова — Успенского. Из резуль¬ 
татов работы [Григорьев, 1976] вытекает невозможность 
обратных моделирований. 

1.6.3. Емкость. Перейдем теперь к обсуждению различ¬ 
ных способов определения емкости вычисления. Ситуация 
здесь, пожалуй, еще более сложная, чем с понятием вре¬ 
мени. Но первое решение при определении емкости при¬ 
нимается однозначно! емкость (данного вычисления) — 
это максимальный размер памяти, используемой при вы¬ 
числении. Это содержательное представление порождает 
два вопроса. 

1. Что нужно считать памятью, используемой в данный 
момент вычисления? 

2. Как измерить эту память? Что есть ее размер? 

В работах по сложности вычислений встречаются два 
различных ответа на первый (более простой) вопрос. Прос¬ 
тейший ответ состоит в том, что памятью считается все со¬ 
стояние вычисления. Для таких вычислительных моделей, 
как одноленточные машины Тьюринга (без входных и вы¬ 
ходных лент) или алгоритм Колмогорова (опять-таки без 
входных и выходных лент), этот ответ — единственно воз¬ 
можный. Однако для реальных вычислений часто представ¬ 
ляет интерес оценка размера только рабочей памяти. Это¬ 
му соображению соответствует выделение рабочей памяти, 
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входных и выходных лент, как это сделано в приведенном 
выше определении емкости для многоленточных машин 
Тьюринга. Если вычислительная модель предусматривает 
такие ленты (или, гипотетически, какие-либо другие уст¬ 
ройства ввода и вывода), то при вычислении емкости ес¬ 
тественно учитывать только рабочую память, считая, что 
только она представляет собой память, используемую при 
вычислении. 

Перейдем теперь ко второму, более сложному вопросу — 
о способах измерения памяти. Мы обнаруживаем, что даже 
в простейших случаях возникает много разных способов 
определения размера памяти, и трудно решить, какие луч¬ 
ше, какие хуже. Эта множественность возможных решений 
отражает существо дела. Проиллюстрируем нашу мысль 
следующим примером. Предположим, что мы хотим опре¬ 
делить, что такое размер автоцистерны, и колеблемся, на 
каком из параметров — длине, ширине, высоте или вмести¬ 
мости — нам остановиться. Скоро мы обнаруживаем, что 
каждая из этих характеристик существенна в надлежащем 
контексте: высота определяет возможность проезда под 
мостами, длина — возможность развернуться в тупике 
и т. д. Кажется более правильным вообще считать размер не 
числом, а вектором (из нескольких компонент) и признать, 
что любая подгонка его под число искусственна. 

Аналогично нашему «автомобильному» примеру обсто¬ 
ит дело и с вычислительными моделями. Например, для 
машин Тьюринга с одной рабочей лентой неясно, должны 
ли мы учитывать только длину записи на ленте или еще и 
увеличение объема за счет фиксации положения рабочей 
головки. Явное указание положения головки можно осу¬ 
ществить, задав двоичное слово с длиной, равной примерно 
логарифму длины слова на ленте, но по-прежнему неясно, 
нужно ли прибавлять это число к длине записи на ленте. 

Другая неясность связана с тем, должен ли объем зави¬ 
сеть от алфавита: одинаков ли, например, размер десяти¬ 
буквенного слова в двух- и трехбуквенных алфавитах. 
Ведь очевидно, что можно «дешевым способом» сократить 
длину каждого слова в миллионы раз, объявив новыми бук¬ 
вами длинные комбинации прежних букв. 

При переходе к случаю многих лент возникнут допол¬ 
нительные проблемы: нужно ли складывать длины записей 
на лентах, или следует умножать максимум длины этих за¬ 
писей на их количество, или, может быть, нужно учитывать 
еще разницу в направлениях сдвига головок на лентах от 
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начального положения и т. д. При переходе к многомерной 
памяти возникают еще большие неясности, связанные, в 
частности, с отсутствием естественной реализации такой 
памяти в трехмерном пространстве. 

В случае неориентированных колмогоровских комплек¬ 
сов вопрос об объеме физической реализации комплексов 
изучался в работе [Колмогоров, Барздинь, 1965]. За счет 
несущественного ослабления формулировки, результаты 
из [Колмогоров, Барздинь, 1965] могут быть изложены 
в следующей наглядной форме. Фиксируем некоторый ан¬ 
самбль колмогоровских комплексов. Предположим теперь, 
что вершины комплекса реализуются шарами единичного 
диаметра, а ребра — гибкими трубками тоже фиксирован¬ 
ного и притом достаточно малого диаметра. Тогда можно 
так выбрать диаметр труб, что для некоторых положитель¬ 
ных действительных чисел с и й выполнены следующие ус¬ 
ловия: 1) всякий комплекс с п вершинами может быть реа¬ 
лизован внутри сферы радиуса сѴ я; 2) объем любой реали¬ 
зации почти всякого комплекса с п вершинами не меньше 
<іпѴ п («почти всякого» означает, что отношение количест¬ 
ва комплексов с этим свойством к количеству всех комп¬ 
лексов с п вершинами стремится к единице при стремлении 
п к бесконечности). 

Из сказанного видно, что разумный выбор способа под¬ 
счета размера используемой памяти в большинстве случа¬ 
ев — задача, не имеющая однозначного решения (а порой, 
быть может, и вовсе неразрешимая). Некоторым утешением 
может служить тот факт, что различные способы определе¬ 
ния понятия размера для одного класса объектов дают близ¬ 
кие по значениям емкостные функции. (Например, для мно¬ 
голенточных машин с фиксированным числом лент все упо¬ 
минавшиеся способы подсчета размера дают функции, свя¬ 
занные отношением -т*.) 

Практически приходится выбирать какую-нибудь одну 
числовую характеристику — например, длину слова (без 
учета мощности алфавита), или число вершин комплекса 
(без учета числа ребер и алфавита разметки), или макси¬ 
мальную длину записей на рабочих лентах машины (без 
учета записей на других лентах и положения головок) — 
в качестве суррогата «истинного размера». Первой из таких 
«суррогатных» характеристик, встречающихся в литерату¬ 
ре (хотя и не для какой-либо вычислительной модели, а в 
несколько иной ситуации), была введенная в [Трахтен- 
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брот, 1956] длина отрезка вычислимости функции, заданной 
рекурсивной схемой. Под отрезком вычислимости понимал¬ 
ся отрезок натурального ряда, содержащий все числа, кото¬ 
рые могут встретиться в процессе вычисления функции 
по заданной схеме при фиксированных значениях аргу¬ 
ментов. 

Существует ли вообще «истинный размер», или же его 
поиски подобны поискам философского камня? Быть может, 
имеется большая совокупность «истинных размеров» — 
но тогда какова она? Ответы на эти вопросы неясны. Быть 
может, полезно было бы начать с попыток ввести понятие 
абстрактного размера на различных ансамблях (а возмож¬ 
но, и на их подмножествах). 

1.6.4. Норма. Мы попытаемся сейчас высказать некото¬ 
рые — далеко не исчерпывающие — соображения по это¬ 
му поводу. Чтобы подчеркнуть, что мы пытаемся отразить 
лишь некоторые аспекты интуитивного понятия размера, 
вместо слова «размер» будем говорить «норма». В проводи¬ 
мом ниже построении предполагается, что норма определе¬ 
на на всем ансамбле. Это предположение вносит довольно 
существенное ограничение. 

В самом деле, рассмотрим, например, трехленточные 
машины Тьюринга с фиксированными алфавитами (рабо¬ 
чим и внутренних состояний). Всевозможные полные сос¬ 
тояния рабочей памяти таких машин легко вкладываются 
в подходящий колмогоровский ансамбль и образуют не¬ 
которое подмножество Е этого ансамбля. Если понимать 
размер (полного) состояния рабочей памяти как максималь¬ 
ную из длин записанных на ленте слов, то, очевидно, та¬ 
кая норма естественным образом определена лишь на Е 
и всякое ее распространение на все ѴР носит довольно ис¬ 
кусственный характер. Однако авторы еще не чувствуют 
себя готовыми рассматривать нормы, определенные не на 
всем ансамбле (хотя понимают, что это было бы раз¬ 
умно). 

Итак, что же такое ансамбль с нормой, или нормирован¬ 
ный ансамбль? 

Пусть Ж — некоторый ансамбль, а п — некоторая всю¬ 
ду определенная функция их X в N. Функция п будет на¬ 
зываться нормой на X, если она обладает следующими свой¬ 
ствами. 

(Н1) Число элементов х, для которых п(х)^.т, равно 
2 « с точностью до ограниченного отделенного от нуля мно¬ 
жителя. 
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(Н2) Существует алгоритм, дающий по любому числу т 
список всех элементов ансамбля X , для которых п(х)<і 

Нормированный ансамбль есть пара (X, п), где X _ 

ансамбль, а п — норма на X. 

1.6.5. Примеры нормированных ансамблей. Пусть дан 
словарный ансамбль (напомним, что в алфавите словарного 
ансамбля должны быть по крайней мере две разные буквы). 
В качестве одной из норм на этом ансамбле можно рас¬ 
сматривать функцию, пропорциональную длине слова; 
при этом коэффициент пропорциональности следует вы¬ 
брать с таким расчетом, чтобы выполнялось требование 
(Н1). Более точно, пусть алфавит Б состоит из к букв, к~^ 2. 
Определим функцию п , положив 

п(х) = целая часть числа [(длина слова х) X 1о§ 2 6]. 

Легко проверить, что определенная таким образом на 
ансамбле слов алфавита Б функция действительно будет 
нормой. 

В § 1.17 мы будем рассматривать N как нормированный 
ансамбль. Наделяем его такой нормой! норма числа х рав¬ 
на целой части величины 1о§ 2 (х+1). (Нетрудно проверить, 
что свойства (Н1) и (Н2) действительно выполнены.) 

1.6.6. Ограниченно-искажающие отображения и изо¬ 
морфизмы. Пусть даны два нормированных ансамбля 
( Хі , щ) и (Х 2 , п 2 ). Мы будем говорить, что отображение 
/; А'і-ѵЛ'а является ограниченно-искажающим, если выпол¬ 
нено условие «а(/(*і)) + Яі(*і). Взаимно однозначное соот¬ 
ветствие между ансамблями (Хи гц) и (Х 2 , л 2 ), осуществля¬ 
емое (в обе стороны) вычислимыми ограниченно-искажаю- 
щими отображениями, мы будем называть изоморфизмом 
нормированных ансамблей. Нетрудно доказать, что все 
нормированные ансамбли изоморфны в этом смысле. 

1.6.7. Дополнительные требования к нормам. Ясно, что 
функции, удовлетворяющие определению нормы, образу¬ 
ют весьма широкий класс и что среди норм имеются функ¬ 
ции, мало отражающие наше интуитивное представление 
о размере. Поэтому имеет смысл рассматривать не все нор¬ 
мы, а лишь те, которые обладают некоторыми дополнитель¬ 
ными свойствами. Мы сейчас приведем несколько приме¬ 
ров дополнительных свойств, которые, быть может, имеет 
смысл требовать от нормы на ансамбле (Б, ^-комплексов 
или колмогоровских комплексов. 
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(Д1) Непрерывность: применение одного локального 
действия должно увеличивать норму комплекса не более 
чем на фиксированное число, зависящее от операции, но не 
от комплекса. 

(Д2) Связь с числом вершин: число вершин комплекса не 
должно превосходить нормы, умноженной на некоторую 
константу, не зависящую от комплекса. 

Существуют нормы, удовлетворяющие требованиям (Д1) 
и (Д2). Для построения такой нормы достаточно выбрать 
подходящее инициальное (однопосылочное) исчисление, рас¬ 
положить все комплексы в порядке возрастания минималь¬ 
ного числа шагов, необходимого для их порождения (ср. 
со сложностью порождения, см. п. 1.6.8), и считать нор¬ 
мой комплекса логарифм его порядкового номера. 

Нетрудно доказать, что если норма на колмогоровских 
комплексах удовлетворяет требованиям (Д1) и (Д2), то 
норма слов (рассматриваемых как частный случай комп¬ 
лексов) отличается от их длины не более чем на мульти¬ 
пликативную константу и норма колмогоровского комплек¬ 
са (с точностью до ограниченного отделенного от нуля мно¬ 
жителя) находится между числом вершин и квадратом чис¬ 
ла вершин. (Более тонкий анализ, использующий резуль¬ 
таты [Колмогоров, Барздинь, 1965], позволяет заменить 
квадрат числа вершин на число вершин в степени 3/2.) 

1.6.8. Сложности порождения. Подобно соответствую¬ 
щим понятиям для алгоритмов, понятия времени и емкости 
(порождения) можно пытаться определять и для исчисле¬ 
ний, считая (для однопосылочных исчислений), что время 
порождения (при фиксированном выводе) есть число шагов 
вывода, а емкость — максимальный размер встречающихся 
в этом выводе объектов (см. [Гладкий, 1973, гл. 2, 7]). Мож¬ 
но считать, что числовые значения времени и емкости сами 
порождаются в ходе вывода. Дополнительные эффекты воз¬ 
никают из-за того, что может существовать несколько спо¬ 
собов порождения одного и того же объекта. За сложность 
естественно принять минимум по всем способам порожде¬ 
ния. 

1.6.9. Эффективные алгоритмы. Наконец, важную об¬ 
ласть теории сложности составляют построение конкретных 
эффективных алгоритмов для решения частных задач и до¬ 
казательства того, что эти алгоритмы имеют заданную 
оценку сложности (т. е. действительно эффективны). Эта 
область относится к прикладной теории алгоритмов (см. 



ДОБАВЛЕНИЕ К $ 1.6. РЕАЛЬНОЕ ВРЕМЯ ^ 

Добавление к § 1.6. Моделирование в реальное время 


Приведем определение моделирования в реальное вре¬ 
мя — в той форме, как это определение приведено в [Шён- 
хаге, 1980]. Наряду с машинами Шёнхаге, описанными в 
§ 1.2, будем рассматривать машины Тьюринга с многомер¬ 
ной памятью. Предполагается, что каждая такая машина 
имеет входную и выходную (одномерные) ленты, движение 
головок по этим лентам одностороннее, с входной ленты 
возможно только чтение, на выходную — только запись. 

Рабочая память может содержать произвольное фикси¬ 
рованное число массивов фиксированной размерности (лент, 
плоскостей и т. д.), головки по этим массивам способны 
передвигаться за один шаг на одну клетку в любом направ¬ 
лении. Во всяком вычислении такой машины Тьюринга, 
так же как и во всяком вычислении машины Шёнхаге, 
выделяются моменты сдвига входной ленты и моменты пе¬ 
чати (очередного символа на выходную ленту). Пусть теперь 
51 и 33 — две машины с входным и выходным алфавитом 
{0,1}, каждая из которых может быть машиной Тьюринга 
с многомерной памятью и безвозвратной входной лентой 
или машиной Шёнхаге (напомним, что и ее входная лента 
безвозвратна). 

Будем, в соответствии с [Шёнхаге, 1980], говорить, что 
машина Ш. в реальное время моделирует машину 33, если 
выполнено следующее условие. Пусть для всякого исход¬ 
ного данного х , на котором 33 кончает работу, і а <...<І р — 
такая последовательность моментов времени, что / 0 =0, 
і р — момент окончания работы машины, а Іи . . . і р -і — 
все моменты времени, в которые машина 33 производила 
сдвиг входной ленты или запись на выходную. Тогда долж¬ 
ны существовать такие моменты времени т 0 <ті< ...<$ р , 
что т о =0, т р — момент окончания работы машины 31 о 
аргументом х и при всяком і=1,2, . . ., р выполняются 
условия: 

1) при вычислении с исходным данным х часть этого х , 
прочитанная машиной 31 к моменту т г , совпадает с частью 
х, прочитанной машиной 33 к моменту І г \ 

2) при вычислении с исходным данным х часть результа¬ 
та, напечатанная машиной 51 к моменту т*, совпадает о 
частью результата, напечатанного машиной 33 к моменту 

3) для некоторого с, зависящего от 31 и 33, но не от х, 
имеет место 

Т(—Т — 
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Из этих условий, очевидно, следует, что машина 51 
вычисляет ту же функцию, что и машина 39, или некоторое 
продолжение этой функции; при этом время вычисления 
для машины 51 не превосходит времени вычисления 33, 
умноженного на константу с. 

§ 1.7. Вычислимые функции и породимые множества; 

перечислимые множества; разрешимые множества 

Вычислимая функция — это функция, которая вы¬ 
числяется каким-либо алгоритмом. Слово «вычисляется» 
понимается, согласно § 1.1, следующим образом: при при¬ 
менении к какому-нибудь входу вычисляющий алгоритм 
должен не только давать результат, совпадающий со зна¬ 
чением функции на этом входе, коль скоро такое значение 
существует, но и не давать никакого результата вообще, 
коль скоро функция не определена на данном входе. Пусть 
А и В — подмножества соответствующих ансамблей; по¬ 
средством Сот (Л, В) будет обозначаться класс всех вычис¬ 
лимых функций из Л в В. Таким образом, Сот (Л, Б) с 
сГ (Л, В). Для произвольных ансамблейX, У и X — V- 
представительной модели можно, конечно, формально оп¬ 
ределить Сот (X, У) как класс всех функций из аГ (X, У), 
вычислимых на этой модели. 

Породимое множество — это множество, которое по¬ 
рождается каким-либо исчислением (опять-таки в том смыс¬ 
ле, что порождаются все элементы множества и не порож¬ 
дается ничего лишнего). Каждый ансамбль породим. По¬ 
нятие породимого множества (§епегаЫе зеі) ввел и изучал 
в качестве фундаментального понятия логики и математики 
Пост (см. [Пост, 19441); он, впрочем, пользовался термином 
«порожденное множество» (§епега(ед зеі). Пусть Л — под¬ 
множество некоторого ансамбля. Класс всех породимых 
подмножеств множества Л обозначается Оеп (Л). Таким 
образом, Оеп (Л)с:2 л . Для каждой У -представительной 
порождающей модели класс Оеп (У) можно определить 
формально как класс всех множеств из 2 Г , которые могут 
быть порождены на этой модели. 

Множество называется разрешимым, или распознавае¬ 
мым, если оно содержится в некотором ансамбле и для не¬ 
го существует разрешающий алгоритм. Алгоритм 51 на¬ 
зывается разрешающим алгоритмом для подмножества Л 
ансамбля X, если множество допустимых входов для 31 
совпадает о X и 31 отвечает на все вопросы типа «Принадле¬ 
жит ли х€Х множеству Л?» Проблема отыскания такого 
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алгоритма называется проблемой разрешения для А (см. 
§ 2.1). Таким образом, множество разрешимо тогда и только 
тогда, когда его проблема разрешения решима (т. е. может 
быть решена, имеет решение). 

Рассмотрение понятий породимого и разрешимого мно¬ 
жества способствует значительному прояснению централь¬ 
ных понятий и, результатов математической логики. Так, 
важнейшее требование, предъявляемое к любой разумной 
формализации понятия доказательства, состоит в том, что¬ 
бы множество всех доказательств данной логистической 
системы было разрешимым множеством. Теоремы Гёделя 
о полноте и неполноте утверждают, по существу, породи- 
мость одного множества формул и непородимость другого. 

Понятия вычислимой функции, породимого и разреши¬ 
мого множества тесно связаны друг с другом. Одну из глав¬ 
ных таких связей выражает критерий разрешимости мно¬ 
жества: множество А, расположенное в ансамбле Н?, раз¬ 
решимо тогда и только тогда, когда А ^ Оеп (Щ и И7\Л € 
€<3еп(№). Очевидно, что разрешимость множества эквива¬ 
лентна также вычислимости его характеристической функ¬ 
ции. Другие связи являются простыми следствиями ука¬ 
занных в § 1.5 соотношений между алгоритмами и исчис¬ 
лениями. 

Так, функция вычислима тогда и только тогда, когда 
она, рассматриваемая как множество пар, породима. По¬ 
этому породимость может быть использована для определе¬ 
ния понятия вычислимой функции. Замечательно, что так 
и обстояло дело с первоначальными определениями этого 
понятия. Первые (хронологически) два варианта формаль¬ 
ного определения понятия вычислимой функции как раз и 
заключались в отождествлении (предложенном Чёрчем, 
см. [Чёрч, 19361) вычислимых функций с функциями, по¬ 
рождаемыми (как множество пар) исчислением специаль¬ 
ного вида. В первом варианте использовалось исчисление 
^.-конверсии Чёрча — Клини, во втором варианте — исчис¬ 
ление Эрбрана — Гёделя. В свою очередь, породимые мно¬ 
жества могут быть определены: 

1) как области определения вычислимых функций; 

2) как области значений вычислимых функций; 

3) как множества, являющиеся пустыми или областями 
значений всюду определенных вычислимых функций. 

Это позволяет при изложении теории алгоритмов вообще 
обходиться без понятия исчисления (так делает, например, 
Роджерс в [Роджерс, 1967]). 
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Два любых бесконечных породимых множества и 47' 
изоморфны: существует одно-однозначное вычислимое отоб¬ 
ражение из ЧУ на ЧУ'\ вычислимость этого отображения вле¬ 
чет вычислимость обратного отображения. При таком изо¬ 
морфизме каждое породимое (соответственно разрешимое) 
подмножество ЧУ соответствует породимому (соответствен¬ 
но разрешимому) подмножеству ЧУ'. Это соответствие ин¬ 
дуцирует очевидное взаимно однозначное соответствие меж- 
жу Оеп (ЧУ) и Оеп (ЧУ'). 

Пусть теперь X изоморфно X' , а У изоморфно У; сог¬ 
ласно этим изоморфизмам, каждая вычислимая функция 
из X в У соответствует вычислимой функции из X' в У, 
так, что между Сот (X, У) и Сот (X', У) также возникает 
естественное взаимно однозначное соответствие. Следова¬ 
тельно, при изучении породимых множеств и вычислимых 
функций можно фиксировать специальные породимые мно¬ 
жества ЧУ, X, У и рассматривать только подмножества ЧУ 
и функции из X в У. Часто № берется в качестве X и ЧУ, а 
N — в качестве У. При таком подходе предметом теории 
вычислимых функций оказывается семейство вычислимых 
функций типа № (для всех з). 

Каждая функция, принадлежащая 11 ёГ (№, (^), назы- 

5=0 

вается числовой. Изучение вычислимости числовых функций 
играет центральную роль в общей теории алгоритмов. Ана¬ 
логичным образом при рассмотрении породимых множеств 

00 М* 

можно ограничиться множествами из 11 2 ; эти множест¬ 
во 

ва также называются числовыми. 

Поразительно, что класс всех вычислимых (в интуитив¬ 
ном смысле) числовых функций допускает точное математи¬ 
ческое определение, и даже много таких определений. 
А. П. Ершов в [Ершов А., 1982а] разделяет эти определе¬ 
ния на алгоритмические, логические, функциональные и 
арифметические и пишет: «Сталкиваясь с разнообразными 
определениями вычислимости, мы обнаруживаем, что эти 
определения не объясняют нам, почему они оказываются эк¬ 
вивалентными». 

В § 1.1 мы, по существу, занимались алгоритмическими 
определениями, в § 1.8 займемся функциональным. Каждое, 
вообще, формальное определение выделяет среди всех 
функций данного вида некоторый подкласс — например, 
среди всех числовых функций выделяются частичнорекур- 
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сивные. Утверждение, что выделенный посредством рас¬ 
сматриваемого определения подкласс совпадает с подклас¬ 
сом всех вычислимых функций данного вида, образует те¬ 
зис Чёрча (или тезис Чёрча — Тьюринга — Поста — Кли- 
ни, см. § 1.2) для данного определения. 

В [Пост, 1936] Пост назвал утверждение о совпадении 
двух^ классов функций (рекурсивных и вычислимых) «ра¬ 
бочей гипотезой» и добавил: «В действительности работа, 
проделанная Чёрчем и другими, привела к тому, что это 
совпадение уже переросло стадию рабочей гипотезы. Од¬ 
нако замаскировать это совпадение, включив его в определе¬ 
ние, значило бы скрыть факт фундаментального открытия, 
касающегося ограниченности способности Нолю Заріепз 
к математизации, и заслонить от нас необходимость посто¬ 
янной проверки этого совпадения». 

Перечислимое множество — это либо множество зна¬ 
чений всюду определенной вычислимой функции натураль¬ 
ного аргумента, либо пустое множество. В силу утвержде¬ 
ния 7) из § 1.5, каждое породимое множество перечислимо. 
Таким образом, обе теоремы Гёделя, отмеченные выше, 
можно сформулировать в терминах перечислимости и не¬ 
перечислимости соответствующих множеств. По причинам, 
отмеченным выше, изучение перечислимых числовых 
множеств представляет специальный интерес. 

Рассмотрим теперь метрические аспекты введенных в 
данном параграфе понятий. Все вычислимые функции мож¬ 
но классифицировать по «трудности» их вычисления (а все 
породимые множества — по «трудности» их порождения). 
Стремление к такой классификации было одним из основ¬ 
ных мотивов введения понятий временной и емкостной слож¬ 
ности. Для заданной вычислительной модели и заданной 
«верхней оценки сложности» один класс такой классифика¬ 
ции образуют все функции или предикаты, для которых 
существует алгоритм их вычисления со сложностью, не 
превосходящей данной оценки. 

В качестве оценок, как правило, рассматриваются 
функции, зависящие только от длины слова-аргумента; 
в частности, цитируемые далее теоремы были доказаны имен¬ 
но для таких функций (тем не менее многие из них справед¬ 
ливы и без этого предположения). Мы не видим смысла в 
том, чтобы заранее суживать таким образом класс оценок 
(см. также § 1.17). Длину слова х в настоящем параграфе 
мы обозначаем 1(х). 
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Все определения и теоремы этого параграфа относятся 
к времени и емкости вычислений на многоленточных ма¬ 
шинах Тьюринга, определение которых давалось в § 1.6. 
Лишь в самом конце, обсуждая классы 5* и еАР5*, мы упомя¬ 
нем некоторые другие вычислительные и порождающие мо¬ 
дели. 

Прежде чем сформулировать теоремы о времени и ем¬ 
кости вычислений, дадим некоторые определения. В ка¬ 
честве верхних оценок мы будем по большей части рассмат¬ 
ривать конструируемые (по емкости или времени) функции. 
Всюду определенная функция /, аргументы которой — 
слова данного алфавита, а значения — натуральные числа, 
называется конструируемой по времени, если существует 
многоленточная машина Тьюринга, время вычислений кото¬ 
рой на входе х совпадает с / (х). Разумеется, аналогичное 
определение можно дать и для любой другой вычислитель¬ 
ной модели, заменив многоленточные машины Тьюринга, 
на машины этой модели. Мы определили конструируемость 
по времени так, как это сделано в [Ахо, Хопкрофт, Уль¬ 
ман, 1974, упр. 11.1]. 

Другое определение конструируемости (приводящее к 
другому, хотя и близкому понятию) сформулировано в 
[Слисенко, 1981, гл. 1, § 1, п. 1]; функция называется кон¬ 
струируемой по времени, если время ее вычисления на 
любом аргументе не превосходит ее значения на этом аргу¬ 
менте. В [Ахо, Хопкрофт, Ульман, 1974, § 10.1] определя¬ 
ется также конструируемость по емкости: всюду определен¬ 
ная функция, аргументы которой — слова данного алфа¬ 
вита, а значения — натуральные числа, называется кон¬ 
струируемой по емкости, если существует машина, емкость 
вычисления которой на входе х совпадает с / (х ). Заметим, что 
понятие конструируемости по емкости использует в своем 
определении понятие емкости вычисления, а это последнее 
имело у нас точное определение только для многоленточных 
машин Тьюринга. 

В формулируемых далее теоремах будет идти речь о 
конструируемости функций с натуральными аргументами. 
Мы предполагаем при этом, что натуральный аргумент 
п подается на вход машины в виде «-буквенного слова в од¬ 
нобуквенном алфавите. Таким образом, например, конструи¬ 
руемость функции Ті по емкости для вычислитель¬ 

ной модели «многоленточные машины Тьюринга» означает, 
что существует (детерминированная) машина Тьюринга, 
входной алфавит которой однобуквенный, и работа этой 
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машины на входном слове любой длины п заканчивается 
причем Т (п) равно максимальной из длин использованных 
участков на рабочих лентах. 

Как и следовало ожидать, диагональная конструкция 
позволяет строить сколь угодно сложные вычислимые функ¬ 
ции (и даже предикаты). Более точно, для любой всюду 
определенной вычислимой функции <р из словарного ан¬ 
самбля X в N найдется такое разрешимое множество слов 
А, что всякая многоленточная машина Тьюринга, распоз¬ 
нающая множество А, для всех х^Х, кроме конечного чис¬ 
ла, будет при работе над исходным данным х затрачивать 
время и емкость, превосходящие ср (х) [Трахтенброт, 1967, 
гл. II, § 5, теорема 14]. 

Принципиальная возможность классификации обеспе¬ 
чивается так называемыми теоремами об иерархии. Теоре¬ 
ма об иерархии для заданной сложности (времени или ем¬ 
кости) указывает, какое уменьшение верхней оценки слож¬ 
ности приводит к уменьшению класса функций (или пре¬ 
дикатов), вычислимых с такой сложностью. Первая теоре¬ 
ма об иерархии принадлежит Цейтину и касается времени 
работы (числа шагов) нормальных алгорифмов (см. [Янов¬ 
ская, 1959, с. 45]). 

Все приводимые ниже' теоремы об иерархии относятся 
к сложности вычислений на многоленточных машинах 
Тьюринга (в частности, под конструируемостью по време¬ 
ни или емкости понимается конструируемость на этой 
модели), хотя, разумеется, аналогичные вопросы могут 
быть сформулированы и для любой другой вычисли¬ 
тельной модели, как только будут определены понятия вре¬ 
мени и емкости вычислений на этой модели. 

Теорема об иерархии по емкости состоит в следующем 
(см. [Сейферас, 1977]). Пусть 5 — некоторая конструируе¬ 
мая по емкости функция N и пусть З* — произвольная 

функция, удовлетворяющая условию *’ т = 0; тогда 

П —► оо и (Й/ 

существует множество слов, распознаваемое с емкостью 
5 (/ (х)) и не распознаваемое с емкостью, ограниченной функ¬ 
цией 5 і (/(х)). Таким образом, характеристическая функ¬ 
ция этого множества принадлежит классу, определенному 
верхней оценкой 3(1(х)). Отметим, что любое множество, 
распознаваемое с емкостью о (1о§ Іо§ /(х)), распознаваемо 
с нулевой емкостью (см. [Хопкрофг, Ульман, 1969, теоре¬ 
ма 10.8]). Это обстоятельство не противоречит сформули¬ 
рованной только что теореме об иерархии, так как не су- 
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ществует неограниченных конструируемых по емкости 
функций 5, для которых 5 (х)=о (1о§ 1о§ I (х)). 

Теорема о временной иерархии выглядит следующим 
образом. Пусть Т — некоторая конструируемая по времени 
функция и Т («)>«. Пусть, далее, 7\— некоторая 

функция N -*-М, удовлетворяющая условию 

Ііш Ті (») 1о § Ті (”) _ п 

п-+» Т (> і ) — 

Тогда существует множество слов, распознаваемое с вре¬ 
менем Т ( I (х)) и не распознаваемое с временем, ограничен¬ 
ным Ті(1(х)) (см. [Сейферас, Фишер, Мейер, 1978]). Для мно¬ 
гих функций, представляющих практический интерес, на¬ 
пример полиномов и экспонент, в предыдущей теореме 
можно заменить 1о§ на 1о§®, где а —Произвольное положи¬ 
тельное число (см. там же). Неизвестно, можно ли это сде¬ 
лать в общем случае. 

«Предел точности» классификации вычислимых функций 
по времени вычислений дает теорема о линейном ускорении 
(ср. [Хопкрофт, Ульман, 1969, § 10.33), которую для рас¬ 
сматриваемых нами многоленточных машин Тьюринга с 
входным и выходным устройствами можно изложить сле¬ 
дующим образом. Пусть с — произвольное положительное 
число. Если функция / может быть вычислена за время, 
ограниченное функцией Т, то она может быть вычислена и 
за время, ограниченное функцией шах {сТ, (1+с) ( 1{х) + 
-И(/(х)))}; здесь I — длина слова. Первая теорема о линей¬ 
ном ускорении (для нормальных алгорифмов) была полу¬ 
чена Цейтиным (см. (Яновская, 1959, с. 44], [Цейтин, 1971, 
теорема 2]). 

Потребности практики стимулировали изучение классов 
функций, имеющих относительно небольшую сложность 
вычисления. Можно, скажем, рассматривать все функции, 
вычислимые на многоленточных машинах Тьюринга за 
линейно зависящее от длины входа время. (Обычно их на¬ 
зывают просто функциями, вычислимьши за линейное вре¬ 
мя в аналогичных ситуациях в дальнейшем мы также будем 
опускать слова «от длины входа».) С другой стороны, время 
вычисления большинства практически интересных функций 
с помощью известных алгоритмов ограничено не линейной 
функцией, а полиномом. Время вычисления суперпозиции 
двух таких функций, конечно, также ограничено некоторым 
полиномом; степени таких полиномов могут быть произволь¬ 
ными. Таким образом, мы приходим к определению одного 
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из самых важных классов вычислимых функций, а именно 
класса 3*. Класс 5* содержит те и только те (словарные) 
функции, которые вычислимы за полиномиально ограни¬ 
ченное (от длины входа) время на многоленточных машинах 
Тьюринга. 

То же обозначение используется для соответствующего 
класса предикатов (и множеств), см. [Ахо, Хопкрофт, Уль¬ 
ман, 1974]. Как мы видели в § 1.6, любая словарная функ¬ 
ция из класса 5* может быть вычислена на многоленточной 
машине Тьюринга с одной рабочей лентой за время, не пре¬ 
восходящее некоторого полинома; поэтому при определе¬ 
нии класса 3* можно было бы ограничиться только такими 
машинами. 

Мы определили, как это обычно и делается, класс З і 
для словарных функций. Однако столь же естественно мож¬ 
но ввести класс 5* для функций из А в К, если Хи У — 
ансамбли колмогоровских комплексов (оба — ориентиро¬ 
ванных или оба — неориентированных). Именно, класс 
X — V — 3* (для фиксированных X и К) образован всеми 
функциями, вычислимыми X — К-алгоритмами Колмогоро¬ 
ва за время, не превосходящее полинома от числа вершин 
входного комплекса. Возникающий класс не изменится, 
если заменить в приведенном определении число вершин 
комплекса на норму комплекса — при том условии, что 
рассматриваемая норма обладает свойствами (Д1) и (Д2) 
из § 1.6. Дело в том, что все такие нормы полиномиально 
связаны с числом вершин (они — с точностью до мультипли¬ 
кативной константы — не меньше этого числа и не больше 
его квадрата). 

Таким образом, мы приходим к определению класса З і 
для функций, аргументами и значениями которых служат 
колмогоровские комплексы. Так как словарные ансамбли 
естественно вкладываются в подходящие ансамбли колмого¬ 
ровских комплексов, мы получаем для словарных функций 
два определения — исходное, в терминах многоленточных 
машин Тьюринга, и новое, возникающее при отождествле¬ 
нии словарных функций и соответствующими функциями 
на комплексах. Как и следовало ожидать, они оказываются 
эквивалентными. В"итоге обозначение 3 мы закрепляем за 
объединением классов X — Ѵ — 3*, возникающих при все¬ 
возможных ансамблях X и У. 

Важную роль играет также класс множеств, порождае¬ 
мых однопосылочными исчислениями колмогоровского типа 
за полиномиально (от числа вершин порождаемого элемен- 
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та) ограниченное число шагов. (Без изменения возникаю¬ 
щего класса множеств можно заменить число вершин на 
какую-либо норму на ансамбле колмогоровских комплек¬ 
сов, удовлетворяющую условиям (Д1) и (Д2) из § 1.6, ср. 
сказанное выше.) Этот класс обозначается <№9*. Традиционно 
класс 0^5* определяется для словарных множеств как класс 
множеств, распознаваемых за полиномиальное время на 
так называемых недетерминированных машинах Тьюринга 
(отсюда первая буква обозначения о Н'5 3 )', см. [Ахо, Хоп- 
крофт, Ульман, 1974, § 10.2]. 

Для словарных множеств может быть дано и другое оп¬ 
ределение класса <ЛР5\ равнообъемное традиционному. Имен¬ 
но, фиксируем стандартное вложение данного словарного 
ансамбля в ансамбль неориентированных колмогоровских 
комплексов и отнесем к классу оЛГ^твугСловарные множества, 
которые при этом вложении переходят в подмножества ан¬ 
самбля колмогоровских комплексов, принадлежащие клас¬ 
су ЛГ5». Наконец, можно определить класс словарных мно¬ 
жеств из как состоящий из всех множеств, порождаемых 
грамматиками Хомского типа 0 за полиномиальное число 
шагов. 

Описывая ситуацию более детально, можно, разумеется, 
как и в случае класса 5\ определить сначала класс №9* для 
каждого отдельного ансамбля, а потом взять в качестве 
Х?> объединение полученных классов. 

С точки зрения «практической», «полиномиальной» тео¬ 
рии алгоритмов и исчислений классы 9 і и оАГУ подобны клас¬ 
сам разрешимых и породимых множеств. Примеры множеств 
из класса 

1) произвольный контекстно-свободный язык (см. [Ян¬ 
гер, 1967], [Вэлиант, 1975]); 

2) (для всякого й) множество пар изоморфных графов 
со степенями вершин, не превосходящими й (см. [Землячен- 
ко, Корнеенко, Тышкевич, 1982]); 

3) множество всех систем линейных неравенств с целыми 
коэффициентами, разрешимых в действительных (а следо¬ 
вательно, и в рациональных) числах (см. [Хачиян, 1979]). 

Примеры множеств из класса <№9*: 

1) множество всех выполнимых формул логики выска¬ 
зываний (в [Успенский, Семенов, 1981] вместо этого приме¬ 
ра был указан другой, ошибочный); 

2) множество всех пар изоморфных графов; 

3) множество всех линейных неравенств с целыми коэф¬ 
фициентами, разрешимых в целых числах. 
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Мы хотели бы заметить, что многие практически важные 
проблемы принадлежат с(в том смысле, что множество 
объектов, удовлетворяющих условиям проблемы, является 
множеством из класса оІѴ’^ 5 ). Ясно, что 5 ъ с. а Н‘9 і . Проблема, 
верно ли, что ^= 0 1\РУ, является важнейшей нерешенной 
проблемой. Вопрос о совпадении этих классов весьма ва¬ 
жен, он имеет следующее содержательное истолкование: 
«Относятся ли практически возникающие задачи (задачи 
класса о1\Р5*) к классу реально решаемых (к классу 5*)?» 

Вопрос о совпадении классов и о!может ставиться 
отдельно для каждого словарного ансамбля и для каждого 
ансамбля колмогоровских комплексов. Но, как нетрудно 
видеть, утвердительное или отрицательное решение этого 
вопроса для любого из словарных ансамблей (алфавит каж¬ 
дого из них, напомним, содержит не менее двух букв) или 
для любого из таких' колмогоровских ансамблей, алфавит 
которых содержит не менее трех букв, а число, ограничи¬ 
вающее исходящую степень вершин, также не меньше трех, 
влечет за собой его решение (в ту же сторону) и для всех 
упомянутых ансамблей. 

§ 1.8. Понятие р-рекурсивной функции 

Как сказано в § 1.7, изучение класса II Сот (№, І^) яв- 

5 

ляется важной задачей. Этот класс определяется как класс 
всех вычислимых числовых функций. Вычислимость здесь 
понимается в интуитивном смысле на основе неформаль¬ 
ного математического понятия алгоритма. Можно считать 
(см. § 1.7), что к изучению только числовых вычислимых 
функций сводится вся дескриптивная теория вычислимых 
функций. 

Замечательным и неожиданным фактом является то, что 
класс I) Сот (№, М) может быть описан в чисто функцио- 

5 

нальных терминах без использования вычислительных или 
порождающих моделей. Это открытие принадлежит Клини. 
Именно, Клини обнаружил, что понятие вычислимой теоре¬ 
тико-числовой функции совпадает по объему с введенным 
им понятием р -рекурсивной функции (см. [Клини, 19431). 
Употребляя термин «р-рекурсивный», мы следуем, напри¬ 
мер, монографиям [Хермес, 1965, гл. 3], [Мартин-Лёф, 1970, 
§ 61 . 

р -рекурсивная функция определяется как числовая 
функция, получаемая из некоторого фиксированного набора 
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простейших исходных функций с помощью применения 
(в произвольном числе) простейших операций, также вы¬ 
бранных из некоторого фиксированного набора (см. [Хер- 
мес, 1965, гл. 3], [Мальцев, 1965, § 2], [Успенский, 1960, 
п. 2.3, п. 2.7 и п. 3.51). Этими исходными функциями служат 
константа нуль и функция следования хн*х+1; этими опе¬ 
рациями являются подстановка (в широком смысле, как в 
[Успенский, 1960, п. 2.31), примитивная рекурсия и мини¬ 
мизация (называемая также р-оператором). Тот факт, что 
возникающее понятие (р-рекурсивность функции) оказы¬ 
вается эквивалентным понятию вычислимости, делает воз¬ 
можным изучение принципиально новой с логической точ¬ 
ки зрения концепции вычислимости стандартными теорети¬ 
ко-множественными и алгебраическими методами. 

Конечно, система функций и операций, входящая в опре¬ 
деление р-рекурсивной функции, не является единственно 
возможной. Например, с точки зрения практического про¬ 
граммирования естественно в качестве набора операций 
взять все операции, задаваемые операторными схемами. 
Наборы простейших функций, позволяющие в этой ситуа¬ 
ции получить все вычислимые функции, построены в [Ер¬ 
шов А., 1960]. Естественно возникает задача нахождения 
условий, при которых заданная система функций и опера¬ 
ций позволяет породить весь класс вычислимых функций 
(и не породить ничего лишнего). Для случая, когда систе¬ 
ма операций состоит из всех операторных схем (другими 
словами, из всех стандартных схем программ), эта задача 
поставлена в [Ершов А., Ляпунов, 1967]. О решении ее 
частного случая см. в [Непомнящий, 1972], [Непомнящий, 
1972а]. 

В дальнейшем метод, используемый при определении р- 
рекурсивных функций, послужил основой для построения 
ряда иерархий вычислимых функций. Эти иерархии не ис¬ 
пользуют понятия сложности вычисления; в них большие 
классы определяются через меньшие классы, фиксирован¬ 
ные функции и какие-либо операции, так что каждый следу¬ 
ющий класс получается путем добавления к предыдущему 
некоторой функции и применения — в том или ином числе — 
некоторых операций. Замечательно, однако, что естествен¬ 
но получаемые при этом классы оказываются тесно связан¬ 
ными с классами, возникающими в теории сложности вы¬ 
числений (см. [Мучник А., 1970]). 

Если в определении перечислимого множества из § 1.7 
слово «вычислимая» заменить на «р-рекурсивная», получится 
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определение рекурсивно-перечислимого подмножества на¬ 
турального ряда N. С помощью простейшего изоморфизма 
между N и № определение рекурсивной перечислимости 
распространяется и на подмножества № при 5^2. 

§ 1.9. Возможность арифметического 

и даже диофантова представления 

любого перечислимого числового множества 

Арифметический, или полиномиальный, терм — это вы¬ 
ражение, полученное при помощи операций сложения и 
умножения из натуральных чисел и натуральных перемен¬ 
ных, т. е. полином с натуральными коэффициентами. Поли¬ 
номиальное равенство — это равенство двух полиномиаль¬ 
ных термов. Полиномиальное равенство с п переменными 
определяет некоторое «-местное отношение и тем самым 
некоторое множество точек в №. Это отношение и это мно¬ 
жество называются полиномиальными. Отношения, полу¬ 
чающиеся из полиномиальных отношений применением 
любого числа логических связок и кванторов (соответст¬ 
венно множества, получающиеся из полиномиальных мно¬ 
жеств операциями объединения, пересечения, дополнения 
и проектирования), называются арифметическими. 

Всякое рекурсивно-перечислимое, а следовательно, и 
всякое перечислимое множество натуральных чисел или 
кортежей натуральных чисел фиксированной длины явля¬ 
ется арифметическим. Этот факт является следствием од¬ 
ного предложения Гёделя из его статьи [Гёдель, 1931], а 
именно предложения V, утверждающего арифметичность 
примитивно-рекурсивных отношений (см. также [Клини, 
1952, § 49]). Сейчас ясно, что арифметичность перечислимых 
множеств сразу ведет к неполноте арифметики (ввиду на¬ 
личия перечислимого множества натуральных чисел с непе¬ 
речислимым дополнением, см. ниже § 1.10). 

Если при получении описанным способом отношения 
или множества из полиномиального отношения или мно¬ 
жества используются только кванторы существования или 
соответственно только операции проектирования, такое 
арифметическое отношение или множество называется ди- 
офантовым (см. [Матиясевич, 1979], [Матиясевич, 1979а]). 
В 1953 г. Дейвис в [Дейвис, 1953] высказал гипотезу, что 
всякое перечислимое числовое отношение (соответственно 
числовое множество) является диофантовым. Эта гипотеза 
подтвердилась. 
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Об истории ее доказательства Матиясевич в [Матиясе-* 
вич, 1979в] пишет: «В 1961 г. было доказано (см. [Дейвис," 
Путнам, Робинсон, 1961]) более слабое утверждение: каж-| 
дое перечислимое множество является показательно-дио-‘ 
фантовым множеством, т. е. для каждого перечислимого^ 
множества Ш существуют такие выражения К и Ь, постро¬ 
енные из натуральных чисел и переменных а, г*. г п с 

помощью сложения, умножения и возведения в степень, что 
а б 9Я тогда и только тогда, когда показательно-диофантово 
уравнение разрешимо относительно г*, . . г„. После 

этого для доказательства гипотезы Дейвиса осталось ука¬ 
зать способ, позволяющий преобразовать произвольное 
показательно-диофантово уравнение в некоторое диофан- 
тово уравнение, имеющее или не имеющее решения одно¬ 
временно с ним. Было доказано ([Робинсон, 1952]), что та¬ 
кое преобразование возможно, если существует диофантово 
уравнение 

ѵ, . . 2 *) = 0 , 

обладающее следующими двумя свойствами: 1) в любом ре¬ 
шении этого уравнения 2) для любого с существует 

решение, в котором ѵ>и с (про такое уравнение говорят, что 
оно имеет экспоненциальный рост). 

Пример диофантова уравнения, имеющего экспоненци¬ 
альный рост, который впервые был построен в [Матиясе¬ 
вич, 1970], завершил доказательство гипотезы о диофанто- 
вости перечислимых множеств (полностью доказательство 
гипотезы Дейвиса изложено в [Матиясевич, 1972], [Манин, 
1973]). Обратное утверждение о перечислимости диофанто- 
вых множеств доказывается легко. Таким образом, класс 
перечислимых множеств совпадает с классом диофантовых 
множеств». 

Теорема о диофантовости перечислимых множеств слу¬ 
жит не только усилением результата об их арифметичности, 
но одновременно и следующего результата: любое перечис¬ 
лимое множество, расположенное в №, можно представить 
как проекцию разрешимого (это разрешимое множество 
можно брать размерностью на единицу больше, т. е. из чис¬ 
ла подмножеств № +1 ; в случае полиномиального множест¬ 
ва, подлежащего проектированию, достаточно повышения 
размерности на 9, см. [Матиясевич, 1977], [Матиясевич, 
1977а]). 

Из теоремы о диофантовости перечислимых множеств 
легко получается еще одно замечательное представление 
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для множеств этого класса (см. [Дейвис, Матияеевич, Ро¬ 
бинсон, 1976])з всякое перечислимое множество натураль¬ 
ных чисел можно представить как множество всех неотри¬ 
цательных значений подходящего многочлена с целыми 
коэффициентами, переменные которого пробегают нату¬ 
ральный ряд. 

Арифметичность, а тем более диофантовость любого поро- 
димого множества натуральных чисел демонстрирует осо¬ 
бую роль операций сложения и умножения в математике 
(ср. с теоремой Тенненбаума в § 2.5). 

§ 1.10. Построение неразрешимого породимого 

множества 

Такое множество может быть построено в произвольном 
ансамбле X. Философская значимость результата состоит 
в выяснении соотношения между породимостью и разре¬ 
шимостью, а именно в установлении существования исчис¬ 
ления, для которого никаким алгоритмом нельзя опреде¬ 
лить, будет ли произвольный элемент из X когда-либо 
порожден. Практическая значимость вытекает из того фено¬ 
мена, что все естественно возникающие в математической 
практике проблемы разрешения (т. е. проблемы построе¬ 
ния разрешающих алгоритмов) суть проблемы разрешения 
для породимых множеств (разумеется, в самой теории ал¬ 
горитмов и исчислений, а также в математической логике 
встречаются проблемы разрешения и иного, высшего рода). 

Указанный феномен частично объясняется, если обра¬ 
тить внимание на следующее свойство тех множеств, для 
которых математическая практика ставит вопрос об их раз¬ 
решимости: х тогда и только тогда принадлежит множеству, 
когда существует т, связанное с этим х заранее заданным 
вычислимым отношением; ясно, что всякое такое мно¬ 
жество породимо. Пусть, например, х — диофантово урав¬ 
нение, а по — его решение в натуральных числах; очевид¬ 
но, т связано с х вычислимым отношением (по паре Ос, 
ѵо) можно вычислить, является ѵо решением для х или нет); 
поэтому множество всех диофантовых уравнений, разре¬ 
шимых в натуральных числах, породимо (но, см. § 1.9, не¬ 
разрешимо). 

Другой пример: х — равенство двух термов в сигнатуре 
группы, а ѵо — вывод этого равенства в соответствующем 
исчислении из добавления к § 1.3; поскольку по паре ( х , 
да) мы можем вычислить, является ли т выводом для х или 
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нет, множество всех равенств, верных в рассматриваемой 
группе, породимо (разрешимо оно или нет — зависит от 
группы, см. § 2.1). 

Существование неразрешимого породимого множества 
или, что то же самое, породимого (перечислимого) множества 
с непородимым (неперечислимым) дополнением равносиль¬ 
но существованию вычислимой функции, не продолжаемой 
до вычислимой всюду (т. е. на X) определенной функции. 
И такое множество, и такая функция чрезвычайно просто 
строятся диагональным методом (см., например, [Колмо¬ 
горов, 1954]). 

Итак, процедура порождения множества РсХ может 
не сопровождаться процедурой разрешения. Если же су¬ 
ществует определенная на X вычислимая функция, для 
всякого элемента х из Р ограничивающая сложность его 
порождения, то с процедурой порождения можно сопоста¬ 
вить процедуру разрешения. 

Естественно возникает вопрос о соотношении сложнос¬ 
ти порождения и сложности разрешения одного и того же 
множества. Переходя к обсуждению этого вопроса, фикси¬ 
руем некоторый словарный ансамбль, в котором и будем 
рассматривать породимые и разрешимые множества. Фик¬ 
сируем также вычислительную модель — одноленточные 
машины Тьюринга без выходной и входной лент (так что 
исходные данные и результаты записываются и читаются 
на единственной ленте) и исчислительную модель — по¬ 
рождающие грамматики типа 0 (они же просто грамматики 
по терминологии [Гладкий, 1973]). Определим время вы¬ 
числения (в данном случае — распознавания) и время по¬ 
рождения как число шагов (вычисления и порождения со¬ 
ответственно). Определим емкость вычисления как макси¬ 
мальную длину ленты в вычислении. Определим емкость 
вывода в грамматике как максимальную длину слова, встре¬ 
чающегося в этом выводе. Определим емкость порождения 
элемента х в грамматике или наименьшую емкость вывода х 
в этой грамматике. Тогда будут верны следующие утвер¬ 
ждения, связывающие введенные сложности разрешения и 
порождения. 

(а) Всякое множество, распознаваемое на нашей вычис¬ 
лительной модели со временем, не большим Т, и емкостью, 
не большей 5, может быть порождено некоторым исчисле¬ 
нием нашей порождающей модели с временем, не большим 
сТ, и емкостью, не большей с8 (где с — константа, не зави¬ 
сящая от распознаваемого элемента). 
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(б) Пусть задано некоторое исчисление Г нашей порожда¬ 
ющей модели. Тогда для задачи: «По словам а, 6 и числу 
к узнать, существует ли в Г вывод Ь из а, в котором длины 
всех промежуточных результатов не превосходят к» суще¬ 
ствует алгоритм нашей вычислительной модели, который 
решает задачу с емкостью, не превосходящей ск*, где с не 
зависит от а, Ь, к. 

Доказательство утверждения (а) почти тривиально. Ут¬ 
верждение (б) в несколько иной форме было независимо до¬ 
казано Сэвичем (см. [Сэвич, 1970]) и (в 1970 г.) Цейтиным 
(см. [Непомнящий, 1974]). Формулировка и доказательство 
теоремы Сэвича — Дейтина имеются в [Ахо, Хопкрофт, 
Ульман, 1974, теорема 10.1]; приблизительная формули¬ 
ровка этой теоремы такова: множество, порождаемое с ем¬ 
костью 5, можно распознавать с емкостью $ 2 . 

Имеется класс алгоритмов и соответствующий ему класс 
исчислений, для которых естественно определяемые классы 
«породимых» и «разрешимых» множеств совпадают. Этот 
класс — конечно-автоматные алгоритмы и исчисления. Од¬ 
нако для него оказывается возможным доказать несовпаде¬ 
ние понятия конечно-автоматной разрешимости с поняти¬ 
ем конечно-автоматной породимости в другом, количест¬ 
венном смысле. Хотя для всякого конечного автомата, по¬ 
рождающего (на выходе) некоторое множество слов, и 
существует конечный автомат, разрешающий (распознаю¬ 
щий на входе) то же самое множество, но бывают порож¬ 
дающие автоматы, для которых при переходе к разрешаю¬ 
щему автомату обязательно происходит экспоненциальный 
рост объема (т. е. числа состояний) вычислительного устрой¬ 
ства (см. [Ершов Ю., 1962], [Корпелевич, 1963], [Лупанов, 
1964]). 

§ 1.11. Проблема сводимости Поста 

Открытие состоит здесь прежде всего в самой постанов¬ 
ке проблемы. 

Изучая неразрешимые породимые множества, возникаю¬ 
щие в математической практике, можно было обнаружить, 
что их проблемы разрешения (заведомо нерешимые) в не¬ 
котором смысле сводятся друг к другу. Подчеркнем, что 
речь идет не о всех мыслимых неразрешимых породимых 
множествах, а лишь об исторически возникших (включая 
всевозможные конкретные примеры «диагональных» мно¬ 
жеств) . 
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В силу сказанного нерешаемость проблемы разрешения 
для любого такого множества можно свести к нерешаемос- 
ти «эталонной» проблемы разрешения для какого-либо из 
диагональных множеств; именно такое сведение — в пря¬ 
мой или косвенной форме — осуществлялось и продолжает 
осуществляться в математической литературе. Встает ес¬ 
тественная проблема — носит ли данное явление универ¬ 
сальный характер, т. е. действительно ли все проблемы раз¬ 
решения для всех мыслимых перечислимых неразрешимых 
множеств сводимы друг к другу; разумеется, слово «своди¬ 
мы» нуждается при этом в должном уточнении. 

Эта проблема, известная теперь под названием проблемы 
сводимости, была вместе с соответствующим уточнением 
предложена Постом в 1944 г. в докладе [Пост, 1944]. В том 
же докладе Пост указал неразрешимые породимые множест¬ 
ва, для которых естественный способ доказательства их 
неразрешимости не требует обращения к эталонной проб¬ 
леме (это были первые примеры подобных необычных до¬ 
казательств неразрешимости множеств). Разумеется, это 
не решало проблему сводимости — тем более, что для мно¬ 
гих из указанных Постом множеств самому Посту в [Пост, 
1944] и его последователям (см. [Роджерс, 1967, § 9.6]) 
удалось найти традиционные доказательства их неразреши¬ 
мости, опирающиеся на отсутствие решения у эталонной 
проблемы. 

Проблема сводимости Поста получила отрицательное 
решение в работах А. А. Мучника (см. [Мучник А., 1956], 
[Мучник А., 1958]) и Фридберга (см. [Фридберг, 1957]): 
были построены неразрешимые породимые множества с не¬ 
эквивалентными проблемами разрешения (и тем самым — 
породимое множество, неразрешимость которого может 
быть установлена лишь методами, отличными от диаго¬ 
нального; о диагональном методе см. [Шень, 1979]) *). 

Уточнение понятия сводимости для проблем разрешения 
представляет собой самостоятельную задачу (которая яв¬ 
ляется предпосылкой для формальной постановки проблемы 
Поста), решенную Постом в [Пост, 1944]. Для произволь- 


*) В решениях Мучника и Фридберга был открыт метод прио¬ 
ритета, сыгравший важную роль в дальнейшем развитии теории ал¬ 
горитмов. Принципиально новое решение проблемы Поста получено 
А. Кучерой (см. Кисега А., Ап аііегпаііѵе (ргіогііу-Ггее) зоіиііоп іо 
Розі’з ргоЫет, см. МаіЬетаіісаІ іоипбаііопз оі сотриіег зсіепсе. 
1986.— 5ргіп§ег (Ш іп сотриіег зсіепсе. V. 233).— Р. 493—500). 
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ных проблем А и В сводимость В к А означает нечто боль¬ 
шее, чем просто импликацию «Л имеет решение»^ «В имеет 
решение» (эта импликация тривиально истинна, когда обе 
проблемы одновременно решимы или нерешимы). Если А и 
В — проблемы, то сведение В к Л образует новую, самостоя¬ 
тельную проблему; на это обстоятельство впервые было 
указано Колмогоровым в [Колмогоров, 1932] (ср. § 2.2). 
В случае, когда Л и В суть проблемы разрешения, представ¬ 
ляется естественным следующее понимание — оно было 
предложено Постом в [Пост, 1944]. Пусть X и У — ансамб¬ 
ли, РаХ, <2 с У, аЛ и В — проблемы разрешения для со¬ 
ответственно Р и <2. 

Сводимость проблемы В к проблеме А или, другими сло¬ 
вами, сводимость по разрешимости множества ф к множест¬ 
ву Р означает, согласно Посту, наличие некоторого едино¬ 
го способа преобразования информации о принадлежности 
или непринадлежности к Р всевозможных элементов X 
в информацию о принадлежности или непринадлежности к 
<2 заданного произвольным образом элемента У. Наличие 
такого способа позволяет эффективно давать ответ на любой 
вопрос вида «уС0.Ъ, пользуясь готовыми ответами на все 
вопросы вида «хСРЪ Сводимость по разрешимости Пост кон¬ 
кретизировал в виде так называемой тьюринговой сводимос¬ 
ти, или сводимости по Тьюрингу (см. [Роджерс, 1967, § 9.4]). 

Точное определение сводимости по Тьюрингу (и, таким 
образом, сводимости по разрешимости) будет дано в следую¬ 
щем параграфе. Здесь же мы ограничиваемся неформаль¬ 
ным понятием сводимости по разрешимости. 

Проблема Поста стимулировала два больших направле¬ 
ния исследований. Первое из них пытается ответить на сле¬ 
дующий вопрос: «Может ли проблема Поста быть решена 
методами Поста (изложенными в его докладе [Пост, 1944])?» 
или, более технично, «можно ли методами Поста построить 
неполное перечислимое неразрешимое множество?» (Мно¬ 
жество называется полным, если оно перечислимо и к нему 
тьюрингово сводится любое перечислимое множество; так, 
все «диагональные» множества полны.) Поскольку «методы 
Поста» могут пониматься как в более узком, так и в более 
широком смысле, в результате уточнения возникают два 
различных вопроса. 

1. Существует ли такое непустое свойство перечислимых 
неразрешимых множеств типа малости («почти-конечности», 
см. [Роджерс, 1967, § 12.6]) дополнения, что любое удовлет¬ 
воряющее этому свойству множество неполно? 
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2. Можно ли сформулировать, и притом без использова¬ 
ния понятия «тьюрингова сводимость», такое непустое 
свойство перечислимых неразрешимых множеств, что лю¬ 
бое удовлетворяющее этому свойству множество неполно? 

Сам Пост рассматривал различные понятия типа почти- 
конечности дополнения (простоту, гиперпростоту, гипер¬ 
гиперпростоту), но ни одно из них (и даже более сильное 
понятие максимальности, введенное впоследствии Фрид- 
бергом) не оказалось пригодным для утвердительного отве¬ 
та на первый вопрос. (Существование полных максималь- - 
ных множеств доказано в [Ейтс, 1965].) 

Положительный ответ на второй вопрос дал Марченков в 
[Марченков, 1976], доказав, что перечислимые неразреши¬ 
мые множества с некоторым свойством (а именно являющие¬ 
ся одновременно полурекурсивными и а-гипергиперпросты- 
ми для некоторой позитивной эквивалентности а) не могут 
быть полными; существование таких множеств было ранее 
установлено Дегтевым в [Дёгтев, 1973]. 

Первое направление тесно связано с изучением того, 
как вообще может быть устроено породимое (перечислимое) 
множество, расположенное в каком-либо фиксированном ан¬ 
самбле (например, сколь «плотно» оно может заполнять 
объемлющее пространство и каков запас перечислимых 
множеств, содержащихся в его дополнении). В соответствии 
со своим устройством перечислимое множество может быть 
отнесено к тому или иному классу (см. [Роджерс, 1967, 

§ 8.7]). Перечислимое множество может быть разрешимым 
(если его дополнение перечислимо), или простым (если его 
дополнение хотя и бесконечно, но не содержит бесконечных 
перечислимых подмножеств), или креативным (если любая 
программа, см. § 1.14, любого перечислимого подмножества 
его дополнения может быть эффективно преобразована в 
элемент, принадлежащий дополнению, но не этому подмно¬ 
жеству) и т. д. Одним из центральных результатов 
является теорема Майхилла (см. [Майхилл, 1955]), утвер¬ 
ждающая, что любые два креативных множества могут быть 
получены одно из другого вычислимой перестановкой 
объемлющего ансамбля. 

Второе направление занимается так называемыми степе¬ 
нями неразрешимости. На совокупности всех множеств, 
расположенных в данном ансамбле (или даже в различных 
таких ансамблях), задается предпорядок, а именно 
если проблема разрешения для множества <3 сводится к 
проблеме разрешения для множества Р (т. е. <2 тьюрингово 
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сводится к Р). Классы эквивалентности этого предпорядка 
называются тьюринговыми степенями неразрешимости (ко¬ 
роче — степенями неразрешимости, или тьюринговыми 
степенями, или Т-степенями). Все разрешимые множества 
образуют одну тьюрингову степень, она обозначается О 
и называется нулевой. Тьюрингова степень называется пере¬ 
числимой, если она содержит хотя бы одно перечислимое 
множество. Существование неразрешимого перечислимого 
множества означает, что существует по крайней мере одна 
ненулевая перечислимая степень; вопрос о том, существуют 
ли по крайней мере две такие степени, образует проблему 
сводимости Поста. На самом деле множество всех перечис¬ 
лимых степеней бесконечно, хотя и счетно ([Мучник А., 
1956, теорема 2]; см. также [Роджерс, 1967, § 10.21). 

На тьюринговых степенях возникает естественный час¬ 
тичный порядок, относительно которого множество этих 
степеней образует верхнюю полурешетку (континуальной 
мощности). Устройству этой полурешетки посвящено боль¬ 
шое количество исследований. Начало было положено сов¬ 
местной статьей Клини и Поста [Клини, Пост, 1954]. Вто¬ 
рым важным этапом были упоминавшиеся выше работы 
А. А. Мучника и Фридберга. В качестве третьего этапа мож¬ 
но указать книгу [Сакс, 1963]. Сейчас проблематика, свя¬ 
занная с верхней полурешеткой Т-степеней, прочно вошла 
в монографическую и обзорную литературу: см. [Роджерс, 
1967, гл. 13], [Шёнфилд, 1977], [Арсланов, 1986, гл. 3], 
обзор [Шор, 1981], посвященный элементарным теориям 
этой полурешетки и ее подструктур, а также обзор [Соар, 
1978], специально посвященный перечислимым Т-степеням. 

Вот два результата из обсуждаемой области, представля¬ 
ющиеся авторам принципиальными: 1) среди ненулевых 
Т-степеней существуют минимальные (см. [Роджерс, 1967, 
§ 13.5] и [Шёнфилд, 1971, § 11]; это есть частный случай 
теоремы 4 из [Спектор, 1956], которая для любой Т-степени 
а утверждает существование — и притом «не слишком боль¬ 
шого» — минимального элемента в частично упорядочен¬ 
ном подмножестве {с[с>>а}); 2) в частично упорядоченном 
подмножестве ненулевых перечислимых Т-степеней нет ми¬ 
нимальных элементов (см. [Мучник А., 1956, теорема 3] 
и [Роджерс, 1967, упр. 10—11]). При изучении верхней полу- 
решетки Т-степеней различают глобальную теорию, изу¬ 
чающую общие свойства Т-степеней, и локальную теорию, 
которая изучает Т-степени, расположенные ниже 0' (так 
обозначается Т-степень креативного множества). Локаль- 


4 В. А. Успенский, А. Л, Семенов 
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ная теория представляет особый интерес потому, что она; 
охватывая теорию перечислимых Т-степеней, по существу 
включает в себя и всю теорию перечислимых множеств, 
Методы доказательства в локальной теории довольно слож«* 
ны. Так, Саксу (см. [Сакс, 1961]) пришлось использовать| 
метод приоритета, чтобы получить минимальную Т- сте-| 
пень, расположенную ниже 0', а Куперу (см.[Купер, 1972])—Ц 
изобрести так называемый метод полной аппроксимации, 
чтобы для любой ненулевой перечислимой Т-степени а по¬ 
строить минимальную ненулевую Т-степень, расположен¬ 
ную ниже а. Последние результаты, относящиеся к локаль¬ 
ной теории, см. в [Шор, 1981а] и [Арсланов, 1985]. 

Отметим в заключение, что наряду с Г-сводимостью Пост 
ввел и другие виды сводимости; некоторые связанные с ними 
результаты можно найти в [Дёгтев, 1979]. 

§ 1.12. Понятие относительного алгоритма, 

или алгоритма с оракулом 

Чтобы получить определение алгоритма с оракулом А, 
надо следующим образом изменить формулировку Колмо¬ 
горова из § 1.1. Оракул А — это некоторое множество в ка¬ 
ком-то ансамбле. Алгоритм с оракулом имеет вопросное 
устройство — некий вспомогательный алгоритм 3, опреде¬ 
ленный (т. е. дающий результат) на множестве всех воз¬ 
можных состояний 5. Каждый шаг процесса, задаваемого 
алгоритмом с оракулом, определяется не только возникшим 
к этому шагу состоянием 5, но и истинностью утверждения 
3(5) € Л. Таким образом, оператор непосредственной пе¬ 
реработки Йг, дающий следующее состояние 5*, оказывает¬ 
ся теперь функцией от двух аргументов — от 5 и от числа 
Ь, принимающего значение 0 или 1 в зависимости от того, 
верно ли соотношение 3(5) ^ А. Алгоритм с оракулом А 
называется также алгоритмом относительно А (см. [Род¬ 
жерс, 1967, § 9.2]). 

Понятие алгоритма с оракулом оказалось важным с мето¬ 
дологической точки зрения. Дело в том, что теория алгорит¬ 
мов и исчислений, как и математическая логика (понимаемая 
по Чёрчу как теория формализованных языков), фор¬ 
мализует некоторые стороны деятельности человека (в от¬ 
личие от других математических дисциплин, которые форма¬ 
лизуют нечто не предполагающее непременного присутствия 
человека). В частности, теория алгоритмов использует по¬ 
нятие элементарной операции. Понятие элементарности — 
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существенно «человеческое» понятие. То, что элементарно 
для человека, может оказаться неэлементарным для других 
существ, и наоборот. Можно считать, что человек, осущест¬ 
вляя вычисление, непрерывно обращается к некоторому 
оракулу, только оракул этот отвечает на столь «элементар¬ 
ные» вопросы (типа «Тождественны или нет эти два симво¬ 
ла?»), что даже не замечается. Можно представить себе бо¬ 
лее мощный, чем у человека, запас вычислительных средств, 
подразумевающий, в частности, обращение к некоторому 
нетривиальному (с человеческой точки зрения) оракулу (ко¬ 
торый в рамках этих средств не осознается скорее всего, как 
внешний оракул, а признается частью самих этих средств). 

Высказанные соображения подтверждаются следующими 
попытками аксиоматически определить понятие вычислимой 
функции. 

Анализируя доказательства, встречающиеся в теории 
вьиислимых функций, можно заметить, что возможен — и 
даже иногда используется (например, [Роджерс, 1967]) — 
следующий способ рассуждений. Сначала устанавливаются 
некоторые основные и интуитивно очевидные свойства 
класса вычислимых функций, а затем требуемые утвержде¬ 
ния выводятся из них. (Подробнее об этом см. в [Успенский, 
1974, § 8], [Успенский, 1982, § 5].) Сформулируем упомяну¬ 
тые выше основные свойства класса К всех вычислимых 
числовых функций. 

(1) Аксиома функциональных констант. 

Класс К содержит все вычислимые числовые функции. 

Это свойство применяется тогда, когда в ходе доказа¬ 
тельства нужно установить принадлежность к К какой- 
либо конкретной функций. Его можно заменить на 

(Г) Класс К содержит константу 0 и функцию следова¬ 
ния. 

(2) Аксиома операторных констант. 

Класс К. замкнутртносительно операторов подстановки, 
рекурсии и минимизации. 

Это свойство применяется, если из утверждения о при¬ 
надлежности к К каких-то функций нужно вывести ут¬ 
верждение о принадлежности к К некоторой другой функ¬ 
ции, выражающейся через первые. В связи с аксиомами 
(Г) и (2) естественно вспомнить § 1.8. 

(3) Аксиома протокола. 

Для всякой функции / из класса К существуют! 

I) множество натуральных чисел Е, характеристическая 
функция которого лежит в К; 


4* 
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11) функции а и Ь, определенные на всех элементах Е, 
принадлежащие К и удовлетворяющие условию: значение 
функции } на числе х равно у тогда и только тогда, когда 
существует такое у из Е, что а(д)—х и Ь (д)—у- 

Содержательная интерпретация этой аксиомы такова. 
Мы предполагаем, что для каждого вычисления существует 
его протокол (запись), представляющий собой последова¬ 
тельность сменяющих друг друга состояний алгоритмичес¬ 
кого процесса (см. § 1.1). Множество Е есть множество ко¬ 
дов всех таких протоколов. В случае, когда К есть просто 
класс всех вычислимых числовых функций, множество всех 
протоколов разрешимо, и, следовательно, характеристи¬ 
ческая функция Е в этом случае принадлежит К■ Функции 
а и Ь выделяют из кода протокола исходное данное и резуль¬ 
тат вычисления. 

(4) Аксиома универсальной функции. 

В классе К существует двуместная функция, универ¬ 
сальная для всех одноместных функций из % («универсаль¬ 
ность» 0 (х, у) означает, что V/ € КЗхѴу /(у)~(/ (х, у)). 

В качестве основания теории вычислимых функций эти 
аксиомы намного более очевидны, чем тезис Чёрча. В самом 
деле, они не позволяют утверждать, что некоторые функции 
невычислимы. В противоположность этому наиболее неоче¬ 
видная часть тезиса Чёрча утверждает, что функции, не¬ 
вычислимые на модели, невычислимы и каким бы то ни было 
образом. 

Кроме других преимуществ аксиоматического подхо¬ 
да — например, замены сложных прямых конструкций 
короткими аксиомами — укажем два следующих преиму¬ 
щества. Первое состоит в том, что данные аксиомы не толь¬ 
ко более очевидны, но также и менее техничны, чем тезис 
Чёрча. Второе преимущество (и недостаток) состоит в том, 
что аксиоматическая система может иметь (и имеет) раз¬ 
личные модели. 

Действительно, четыре перечисленные выше аксиомы 
выполнены не только для класса всех вычислимых функ¬ 
ций, но и для любого класса всех функций, вычислимых с 
данным оракулом. Таким образом, все теоремы, выводимые 
из (1)—(4), выполнены для любого такого класса. Это объяс¬ 
няет возможность чрелятивизацит многих теорем (см. 
[Клини, 1952, § 58, теорема X; § 65, теорема XXIV и т. д.]). 
И наоборот, только те теоремы, которые следуют из акси¬ 
ом (1)—(4), можно релятивизировать. Действительно, как 
доказано в [Шень, 1980], любой класс функций, удовлетво- 
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ряющий этим аксиомам, в действительности есть класс всех 
функций, вычислимых с некоторым фиксированным ораку¬ 
лом (ср. также п. 1.14.4). 

Таким образом, мы видим, что с чисто теоретической 
стороны понятие алгоритма с оракулом позволяет релятиви- 
зировать теорию алгоритмов (см. [Роджерс, 1967, § 9.3]). 
С более практической стороны оно позволяет дать точное 
определение общего понятия сводимости по разрешимости 
и, следовательно, дать точную формулировку фундаменталь¬ 
ной проблемы сводимости (см. § 1.11). Действительно, 
теперь можно ввести следующее определение. Множество ф 
сводится по Тьюрингу (сводится по разрешимости) к мно¬ 
жеству Р тогда и только тогда, когда существует относитель¬ 
ный алгоритм, вычисляющий характеристическую функцию 
множества ф относительно множества Р, или, в оракуль- 
ных терминах, существует алгоритм с оракулом Р, вычис¬ 
ляющий эту характеристическую функцию. Понятие алго¬ 
ритма с оракулом и сам термин «оракул» впервые появи¬ 
лись в статье Тьюринга [Тьюринг, 1939], по этой причине 
Пост ввел в [Пост, 1944] термин «сводимость по Тьюрингу» 
для обозначения сводимости проблемы разрешения самого 
общего вида. 

Важным и естественным частным случаем сводимости по 
Тьюрингу является сводимость за полиномиальное время. 
(Она определяется заданием полиномиального — от дли¬ 
ны входа — ограничения иа время работы алгоритма с ора¬ 
кулом.) Естественно поставить проблему полиномиальной 
по времени сводимости: все ли множества из класса 
сводятся друг к другу за полиномиальное время? (Конеч¬ 
но, если то проблема тривиальна.) Заведомо сво¬ 

дятся друг к другу за полиномиальное время многие пред¬ 
ставители класса возникшие из математической прак¬ 
тики; к каждому из таких представителей все множества 
из сводятся за полиномиальное время (см. [Ахо, Хопк- 
рофт, Ульман, 1974, гл. 10]). Неизвестно, сводятся ли за 
полиномиальное время все множества из <М‘!Р к множеству 
всех пар изоморфных графов (ср. § 1.7, второй пример мно¬ 
жества из <№!Р). 

§ 1.13. Понятие вычислимой операции 

Под операцией понимается функция, аргументы и зна¬ 
чения которой суть множества. В то время как обычная 
вычислимая функция эффективно дает по одному конструк- 
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тивному объекту другой, вычислимая операция должна 
эффективно давать по одному множеству конструктивных 
объектов другое; говоря неформально, эффективность ес-: 
тественно усматривать в том, что операция обеспечивает 
процесс порождения результирующего множества, коль 
скоро задан процесс порождения исходного множества; как 
следствие этого обстоятельства, вычислимая операция пере¬ 
водит породимые множества в породимые. Сказанное ес¬ 
тественно воплощается в нижеследующее формальное оп¬ 
ределение вычислимой операции (см. [Успенский, 1955], а 
также [Роджерс, 1967, §9.7], где вычислимые операции 
называются операторами перечисления, в оригинале —■ 
«епишегаііоп орегаіог»). 

Пусть X и У — два произвольных множества, Х Р — 
множество всех конечных подмножеств множества X. Пусть 
далее Я — произвольное отношение между Х Р и У (т. е. 
произвольное подмножество произведения Х Р хУ). Оп¬ 
ределим отображениеФ множества 2 х в множество ^фор¬ 
мулой 

Ф(Л)={*/|30(0сЛ&<1>, у>еЯ)}. 

Отображение Ф, получаемое таким образом, будем называть 
^-отображением 2 х в 2 У . Всякое ^-отображение Ф моно¬ 
тонно; (Л':эЛ)= фФ(Л'): эФ(Л). Если X состоит из элемен¬ 
тов некоторого ансамбля, то элементы множества Х Р суть 
конечные объекты; в силу сделанных в § 1.0 соглашений, 
имеет смысл говорить о породимости Я- Так вот, если X, 
У и Я породимы, ^-отображение 2 х в 2 У называется вы¬ 
числимой операцией (из 2 х в 2 У ). Ясно, что если А б Оеп (X) 
и Ф — вычислимая операция, то Ф (Л) б Оеп (У)). В со¬ 
ответствии о нашим неформальным представлением о вы¬ 
числимой операции, процесс преобразования одного мно¬ 
жества в другое можно описать следующим образом. Мы 
одновременно порождаем конечные подмножества исход¬ 
ного множества А и элементы отношения Я- Всякий раз, 
как первая компонента порожденного элемента отношения 
Я совпадает с порожденным конечным подмножеством мно¬ 
жества А, мы засылаем соответствующую вторую компо¬ 
ненту в множество Ф (Л). 

В действительности выше мы определили только одно¬ 
местные вычислимые операции; понятие многоместной вы¬ 
числимой операции может быть определено совершенно ана¬ 
логично (или сведено к) понятию одноместной вычислимой 
операции. 
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В терминах вычислимых операций легко могут быть опре¬ 
делены вычислимые операторы. Под оператором мы пони¬ 
маем функцию, аргументами и значениями которой служат 
функции. Определение вычислимого оператора см. в [Род¬ 
жерс, 1967, § 9.8], где эти операторы названы частичноре- 
курсиеными («рагііаі гесигзіѵе»); придумавший эти операторы 
Клини называл их частичнорекурсивными функционалами 
(«іипсііопаі»), см. [Клини, 1952, § 63, 64]. Для произвольной 
операции Ф, отображающей 2 ххѴ в 2 ѴхѴ , определим опе¬ 
ратор Ч* 1 , осуществляющий отображение из $Г (X, У) в 
§~ (II, У): оператор Ч г определен на функции /€<Г(Х, У) 
тогда и только тогда, когда Ф (!) € (0, V), и в этом случае 

([) =Ф (!). Оператор Ч*, полученный таким образом для 
породимых X, У, V, V и вычислимого Ф, называется вы¬ 
числимым, или частичнорекурсивным. Ясно, что если /(Е 
6Сош(Х, У), то Ч'^ 6Сот (V, У). Частичнорекурсивный 
оператор называется рекурсивным, если он определен для 
каждой функции из <!Г (X, У). 

Замечательно, что интуитивное понятие вычислимой 
операции не потребовало для своей формализации никаких 
новых понятий, кроме понятия алгоритма; этот факт еще 
раз подтверждает емкость и универсальность понятия ал¬ 
горитма. Замечательно также, что понятие вычислимой опе¬ 
рации совпадает по объему с понятием исчислительной опе¬ 
рации (см. п. 1.3.1)! этот факт подтверждает емкость и уни¬ 
версальность понятия исчисления. Замечательно, наконец, 
что вычислимые операции являются непрерывными отоб¬ 
ражениями — в предположении, что произвольная система 
множеств «У рассматривается как топологическое простран¬ 
ство с некоторой естественной топологией. Эта топология 
задается так же как и в [Успенский, 1955] и [Роджерс, 1967, 
упр. 11—35], а именно: для всякого конечного множества 
Ъ положим 6 о —{А\0с:А €<^*} и совокупность всех таких 
6 а объявим базой топологии. Естественность такой тополо¬ 
гии заключается в том, что «близкими» (т. е. принадлежа¬ 
щими одной и той же базовой окрестности) объявляются те 
множества из <*Г, которые характеризуются одной и той же 
конечной информацией (т. е. информацией о принадлежности 
к множеству фиксированного для данной окрестности ко¬ 
нечного перечня элементов). 

С помощью вычислимых операций легко определяются 
вычислимость одной функции относительно другой и тью- 
рингова сводимость множеств: § вычислима относительно [, 
если существует вычислимая операция, переводящая / 
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(как множество пар) в § (как множество пар); множество ф 
сводится по Тьюрингу к множеству Р, если характеристик 
ческая функция множества ф вычислима относительней 
характеристической функции множества Р (или, непосред¬ 
ственно в терминах операций над множествами, если су¬ 
ществуют такие вычислимые операции Ф х и Ф 2 , что 
=Фі (Р, Р), ф=Ф 2 (Р, Р), где Р и СІ суть дополнения к Р 
и ф в соответствующих ансамблях). 

Один из наиболее принципиальных фактов, относящих¬ 
ся к вычислимым операциям (в частности, к частичнорекур¬ 
сивным операторам), устанавливается в так называемой 
теореме о неподвижной точке, или первой теореме о рекур¬ 
сии Клини (см. [Роджерс, 1967, § 11.6]). Эта теорема ут¬ 
верждает, что уравнение Ч* 1 (А)—А, где ’Р — вычислимая 
операция, имеет минимальное решение (что верно для вся¬ 
кой монотонной Ч г ), и это решение перечислимо (а если V 
к тому же есть рекурсивный оператор, то это решение еще и 
униформно, т. е. является вычислимой функцией). 

Первая теорема о рекурсии позволяет естественным об¬ 
разом задавать породимые множества (в частности, вычисли¬ 
мые функции) с помощью вычислимых операций. При этом 
описание вычислимой операции рассматривается как финит¬ 
ное задание множества или функции, являющейся неподвиж¬ 
ной точкой операции. Последнее обстоятельство послужи¬ 
ло одной из отправных точек для работ Маккарти и Скотта 
по математической теории вычислений (см. [Манна, 1974, 
гл. 5]). 

Весьма плодотворным оказалось изучение специальных 
способов задания вычислимых операторов — так называе¬ 
мых схем программ (см. [Лакхэм, Парк, Патерсон, 1970]). 
Важнейшие классы схем программ таковы: рекурсивные 
схемы Де Беккера — Скотта (см. [Котов, 1978 і), стандарт¬ 
ные схемы А. П. Ершова (см. [Ершов А., 1973]), структури¬ 
рованные схемы Глушкова (см. [Глушков, 1968], [Семенов, 
1978]). Вся теория схем программ началась со схем Янова 
(см. [Янов, 1958], [Ершов А., 1968], [Ершов А., 1977, §8.5]) — 
стандартных схем с одной переменной. Работы Глушкова по 
структурированным схемам программ составляют раздел 
созданной им теории систем алгоритмических алгебр 
(см. [Глушков, Цейтлин, Ющенко, 1978]). Эта теория позво¬ 
лила использовать алгебраические и логические методы для 
изучения схем программ и послужила основой для интен¬ 
сивно развивающейся дисциплины — программной логики 
(см. [Валиев, 1979]). 
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Вычислимые операции приводят не только к определе¬ 
нию сводимости множеств конструктивных объектов, но 
также и к некоторым вариантам представления о сводимости 
совокупностей таких множеств. Пусть Л, ѣ — совокуп¬ 
ности множеств, причем элементами этих множеств являют¬ 
ся конструктивные объекты. Тогда, по определению, Зд сла¬ 
бо сводится к Л, если для каждого Л б Л существует вычис¬ 
лимая операция Ф такая, что Ф(Л)б^; совокупность ѣ 
сильно сводится к Л, если существует вычислимая опера¬ 
ция Ф такая, что Ф (Л) ^ ЗВ для каждого А$.Л. В том слу¬ 
чае, когда совокупности Л и Зд состоят из всюду определен¬ 
ных числовых функций, понятие сильной сводимости и сла¬ 
бой сводимости были предложены соответственно Медведе¬ 
вым (в [Медведев Ю., 1955], [Медведев Ю., 1956]) и 
А. А. Мучником (в [Мучник А., 1963]), поэтому сильную 
сводимость можно называть сводимостью по Медведеву, а 
слабую сводимость — сводимостью по Мучнику, мы вер¬ 
немся к этим сводимостям в конце § 2.1. Существуют такие 
две совокупности всюду определенных функций, что одна 
из них сводится к другой слабо, но не сильно (см. [Муч¬ 
ник А., 1963]). Класс всех совокупностей всюду определен¬ 
ных числовых функций, слабо (соответственно сильно) сво¬ 
дящихся друг к другу, называется слабой (соответственно 
сильной) степенью трудности (см. [Медведев Ю., 1955], 
[Медведев Ю., 1956], [Мучник А., 1963]). 

Пусть А, В — (сильные или слабые) степени трудности; 
по определению А^В, если некоторый элемент степени А 
(сильно или соответственно слабо) сводится к некоторому 
элементу степени В. (Заметим, что в [Мучник А., 1963, 
с. 1331,29-я строка сверху] при введении знака «О допуще¬ 
на опечатка: вместо «В слабо сводится к проблеме Л» сле¬ 
дует читать: «А слабо сводится к проблеме 5»). Сильные 
степени трудности, частично упорядоченные отношением 
сильной сводимости, образуют решетку, которая называет¬ 
ся решеткой Медведева (см. [Роджерс, 1987, § 13.7]). Верх¬ 
няя полурешетка 7’-степеней вложена в решетку Медведе¬ 
ва: для этого каждую Т'-степень А следует отождествить 
с сильной степенью трудности одноэлементной совокупности 
функций {%}, где х есть характеристическая функция число¬ 
вого множества А , а А есть произвольное множество, имею¬ 
щее А своей Г-степенью. 

Слабые степени трудности, частично упорядоченные от¬ 
ношением слабой сводимости, также образуют решетку, 
которую можно назвать решеткой Мучника. Имеется оче- 
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видное отображение решетки Медведева в решетку Мучни¬ 
ка, и это отображение оказывается гомоморфизмом (см. 
[Мучник А., 1963]). Для каждой из решеток наименьшим 
элементом 0 является степень трудности, содержащая вы¬ 
числимую функцию, а наибольшим элементом ! 1 является 
степень трудности пустой совокупности. Эти решетки будут 
использованы в § 2.2. 

§ 1.14. Понятие программы: программы как объекты 

вычисления и порождения 

1.14.0. Существенным этапом в развитии теории алго¬ 
ритмов было осознание того, что алгоритмы и исчисления 
имеют формальные задания (см. выше § 1.2, 1.4) и что эти 
формальные задания (точнее, некоторые их записи) сами 
могут служить объектами алгоритмических и исчислитель- 
ных преобразований. Это открытие было сделано Тьюрин¬ 
гом в [Тьюринг, 1936]. В этом параграфе мы обсудим воз¬ 
никающие в связи с этим понятия «способ программирова¬ 
ния» и «программа». 

1.14.1. Способы программирования. Совокупность все¬ 
возможных формальных заданий, естественно возникающая 
при рассмотрении фиксированной вычислительной (или 
порождающей) модели, не обязательно лежит в каком-ни¬ 
будь одном ансамбле. Поэтому элементы этой совокупности 
не могут, вообще говоря, ни подаваться на вход какого- 
либо одного алгоритма, ни порождаться каким-либо одним 
исчислением. Чтобы формальные задания во всей их сово¬ 
купности могли быть входами или выходами алгоритма или 
порождаться исчислением, эти задания надо предваритель¬ 
но записать (закодировать) так, чтобы полученные записи, 
или коды, принадлежали какому-нибудь одному ансамблю. 

Именно так осуществляется переход от изображений 
нормальных алгорифмов к записям этих алгорифмов (см. 
[Нагорный, 19776]): изображения суть слова, но не принад¬ 
лежащие никакому единому словарному ансамблю, тогда 
как записи суть слова в двухбуквенном алфавите. Такая 
предварительная обработка не нужна для реальных язы¬ 
ков программирования, где описание алгоритма представ¬ 
ляет собой слово в некотором общем для дурной вычисли¬ 
тельной модели алфавите языка программирования. Она 
не нужна и для машин Колмогорова над ориентированными 
или неориентированными колмогоровскими комплексами 
с фиксированным алфавитом разметки: формальные зада- 
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ния всех таких машин можно представить себе лежащими 
в одном и том же ансамбле. 

С другой стороны, переход к записям необходим, на¬ 
пример, для машин Тьюринга. Формальное задание ал¬ 
горитма вычисления на такой машине может содержать 
символы (в частности, обозначения внутренних состояний), 
число которых заранее не ограничено. Наиболее естествен¬ 
ный выход — считать эти символы комбинациями более 
простых, принадлежащих уже к ограниченному алфавиту. 
Так это и делается в математических текстах, где для обоз¬ 
начения состояния машины Тьюринга может использовать¬ 
ся, скажем, символ % зв . 

Итак, пусть фиксирована некоторая вычислительная 
модель. Пусть также фиксированы входной ансамбль X и 
выходной ансамбль У. Тогда возникает некоторое семейст¬ 
во X — У-алгоритмов — семейство всех тех алгоритмов, 
которые реализуются конкретными представителями дан¬ 
ной вычислительной модели. Например, если наша вы¬ 
числительная модель — трехленточные машины Тьюринга, 
а X и У — словарные ансамбли в некоторых алфавитах, то 
каждой конкретной трехленточной машине Тьюринга (ха¬ 
рактеризуемой своими ленточными алфавитами, совокуп¬ 
ностью внутренних состояний и системой команд) соот¬ 
ветствует некоторый X—У-алгоритм. Но ни сами эти пред¬ 
ставители (в примере — трехленточные машины Тьюринга), 
ни формальные задания соответствующих алгоритмов еще 
не представляют собой конструктивных объектов какого- 
либо единого ансамбля и тем самым не могут служить 
объектами алгоритмических преобразований. Поэтому нам 
следует договориться о том, каким образом формальные 
задания следует погрузить в некоторый ансамбль. Такое 
погружение мы будем называть способом программирования 
(для данной вычислительной модели). 

Подчеркнем, что для одной и той же вычислительной 
модели и при одних и тех же входных и выходных ансамб¬ 
лях возможны различные способы программирования. На¬ 
пример, для рассмотренного случая машин Тьюринга мож¬ 
но по-разному договориться о способе кодирования внут¬ 
ренних состояний (число которых заранее не ограничено) 
с помощью конечного набора символов; традиционная за¬ 
пись вроде «^азв» (см. выше) отнюдь не является единствен¬ 
ной возможной. Введенное понятие «способ программирова¬ 
ния» можно обозначать более полным термином «способ 
программирования алгоритмов» — для отличия от рассмат- 
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риваемого ниже способа программирования вычислимых 
функций. 

С каждым способом программирования связан некоторый 
ансамбль — программный ансамбль данного способа про¬ 
граммирования, элементы которого рассматриваются как 
коды формальных заданий соответствующих алгоритмов и 
называются программами. Вообще говоря, не все элементы 
программного ансамбля являются программами, однако при 
всех разумных способах программирования множество Р 0 
всех программ является разрешимым подмножеством про¬ 
граммного ансамбля Р. Можно условиться трактовать вся¬ 
кий элемент из Р как программу, рассматривая любое р из 
Р\Р„ в качестве программы алгоритма с пустой областью 
применимости. Так мы и будем поступать в дальнейшем. 

Всякий алгоритм вычисления на данной модели имеет 
программу в Р. Эта программа содержит минимально не¬ 
обходимую информацию, которая отличает данный алго¬ 
ритм от всех других алгоритмов вычисления на рассматри¬ 
ваемой модели (но не включает информации о способе про¬ 
граммирования, общей для всех алгоритмов модели) и 
получается некоторым «простым и естественным» образом из 
формального задания алгоритма. Этот простой и естествен¬ 
ный образ состоит в выявлении в формальных заданиях 
более «мелкой», «внутриклеточной» структуры, погружаю¬ 
щем все формальные задания в один общий ансамбль. 

Понятие способа программирования не является точным 
математическим понятием (как и понятие вычислительной 
модели). Мы попытаемся сейчас указать некоторые свойст¬ 
ва, которыми должен обладать каждый разумный способ 
программирования. С этой целью попробуем ответить на 
следующий вопрос- какие математические понятия связаны 
в нашем представлении с термином «способ программирова¬ 
ния»? 

Прежде всего — и это уже отмечалось — способ про¬ 
граммирования предполагает фиксацию, помимо входного 
ансамбля X и выходного ансамбля V, некоторого третьего 
ансамбля — ансамбля программ. Далее, следует как-то 
отразить наши представления о способе применения данной 
программы к данному аргументу. Нам представляется, что 
достаточно (и, может быть, исчерпывающе) полное представ¬ 
ление об этом дает трехместная функция А (р, х, і), аргумен¬ 
тами которой являются программа р, исходное данное х 
и натуральное число (момент времени) і, а значение равно 
(полному) состоянию вычислительного процесса в момент 
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времени і при работе машины с программой р на исходном 
данном х. Рассмотрение этой функции предполагает, разу¬ 
меется, что все состояния вычислительного процесса сде¬ 
ланы, как это описано в § 1.1, элементами некоторого ан¬ 
самбля (такое погружение может, конечно, происходить 
разными способами). Таким образом определенную функ¬ 
цию А естественно назвать вычислительной функцией для 
заданной вычислительной модели (с фиксированным спо¬ 
собом погружения ее состояний в некоторый ансамбль) и 
заданного способа программирования. 

В терминах вычислительной функции А могут быть вы¬ 
ражены и некоторые другие понятия, связанные с вычис¬ 
лительной моделью. Например, входная процедура есть 
по существу отображение хі-*А (р, х, 0). Напротив, выход¬ 
ная процедура, так же как и правило, определяющее мо¬ 
мент окончания работы, должна быть задана помимо вы¬ 
числительной функции. Именно, правило окончания пред¬ 
ставляет собой предикат П, заданный на множестве всех 
возможных состояний вычислительного процесса (множест¬ 
ве, элементами которого являются значения вычислитель¬ 
ной функции А), а выходная процедура — отображение Я 
этого множества в выходной ансамбль У. Введя эти поня¬ 
тия, мы можем определить теперь, например, время работы 
данной программы р на данном аргументе х как наименьшее 
число і, при котором А (р, х, () обладает свойством П. Зна¬ 
чение Я {А (р, х, /)) при этом і естественно считать результа¬ 
том работы программы р на исходном данном х. 

Вычислительные функции, естественным образом пост¬ 
роенные по известным вычислительным моделям, обладают 
некоторыми общими свойствами. Отметим свойство «непре¬ 
рывности по Ь, утверждающее, что объект А (р, х, Н-1) 
может быть получен из объекта А (р, х, і ) некоторой локаль¬ 
ной операцией (и, стало быть,— если принять свойство 
(Д1) из § 1.6,— норма объекта А (р, х, Н-1) близка к норме 
объекта А (р, х, і). Другое подобное свойство — непрерыв¬ 
ность входной процедуры — утверждает, что близким па¬ 
рам (х, р) и (*', р') должны соответствовать близкие значе¬ 
ния А (р, х, 0) и А (р 1 , х', 0). Предикат П, как правило, яв¬ 
ляется локальным свойством, а функция Я — локальной 
операцией. 

Было бы интересно построить «аксиоматическую» теорию 
способов программирования, т. е. объявить аксиомами 
какие-то свойства вычислительной функции, правила окон¬ 
чания и выходной процедуры (в том числе, возможно, ужа 
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указанные) и выводить из них различные следствия. Но 
какие именно свойства следует считать аксиомами, какие 
следствия выводить, да и вообще можно ли эту программу 
осуществить — об этом говорить еще рано. 

Поэтому мы ограничимся лишь частью информации о 
способах программирования — именно, не будем интере¬ 
соваться всем процессом вычисления, а будем интересовать¬ 
ся только результатом. Говоря более точно, свяжем с каж¬ 
дым способом программирования двуместную функцию 
О ( р , х), аргументами которой являются программа р и 
исходное данное х, а значением — результат применения 
программы р к исходному данному х. (Выше было сказано, 
каким образом эта функция может быть выражена через 
А, П и )?: 

II ( р, х) ~ Я (А (р, х, рШ (Л (р, х, I)))), 

где символ \кі имеет смысл «наименьшее і, такое что».) Эта 
функция не определяет однозначно способ программирова¬ 
ния (в ее терминах, например, невозможно сформулировать 
утверждения, касающиеся промежуточных состояний, воз¬ 
никающих при работе машины с данной программой на дан¬ 
ном объекте, или времени работы машины с данной програм¬ 
мой на данном объекте). Функцию V естественно назвать 
результатной функцией данного способа программирова¬ 
ния. 

1.14.2. Универсальные алгоритмы и универсальные функ¬ 
ции. Что можно сказать о свойствах результатной функ¬ 
ции (/? 

Первое свойство функции I/ состоит, конечно, в ее вы¬ 
числимости. Следуя программистской традиции, вычисляю¬ 
щий ее алгоритм следует назвать интерпретатором (ин¬ 
терпретаторов — при одном и том же способе программиро¬ 
вания, т. е. для одной и той же С/,— может быть много, но 
все они, конечно, эквивалентны). 

До сих пор мы не предполагали представительности рас¬ 
сматриваемой модели. Сделаем теперь такое предположе¬ 
ние: ясно, что наиболее интересны и важны именно предста¬ 
вительные вычислительные модели. Итак, пусть модель 
X — У-представительна. В этом случае интерпретатор на¬ 
зывается универсальным алгоритмом, а второе свойство 
результатной функции состоит в том, что всякий X — 
У-алгоритм может быть задан некоторой программой. Сфор¬ 
мулируем это свойство (Универсальность для Модели) более 

ТОЧНО! 
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(УМ) для любого X — У-алгоритма 31 существует та¬ 
кая программа р€Р, что для всех х^Х имеет место услов¬ 
ное равенство 31(х)^(/ (р, х). 

Свойство (УМ) и выражает, конечно, то обстоятельство, 
что рассматриваемая модель представительна. Это свойство 
не предполагает, однако, «эффективного» нахождения р 
по 31. Слою «эффективного» взято здесь в кавычки, так как 
нуждается в уточнении — ведь алгоритм 31 не представля¬ 
ет собой конструктивный объект. Это слово можно уточнить 
следующим образом. Рассмотрим семейство алгоритмов 3(,, 
заданное параметрически: 3і,(х)=31 ((і, х)), і^.1, где 3( — 
некоторый алгоритм, а / — породимое множество. Оказы¬ 
вается, что (при всех разумных способах программирова¬ 
ния) программу, соответствующую алгоритму 31 ( , можно 
эффективно найти по і. Сформулируем теперь это свойство 
(Гёделевость для Модели) более точно: 

(ГМ) для каждого породимого множества / и каждого 
алгоритма 31: ІХХ-+У существует алгоритм 3): I-+Р с 
областью определения /, для которого 31 Ш, х))~і/(2) ( і ), х) 
при всех х^Х, і$І. 

Свойство (ГМ) представляется совершенно естествен¬ 
ным. В самом деле, достаточно взять в качестве 3!) алгоритм, 
который в применении к і просто выдает программу X — 
У-алгоритма: «образуй пару (і, х) и примени к ней алгоритм, 
вычисляющий ІІч>. 

Поясним смысл утверждения (ГМ). Говоря неформаль¬ 
но, оно утверждает, что имеется способ трансляции про¬ 
грамм любого другого способа программирования в про¬ 
граммы нашего способа программирования. В данной выше 
формулировке 31 и задает этот «другой» способ программи¬ 
рования, / — его программный ансамбль, 3) — трансля¬ 
тор, существование которого утверждается. 

Все естественно возникающие способы программирова¬ 
ния обладают свойством (ГМ). Это свойство можно рассмат¬ 
ривать как уточняющее наши интуитивные представления 
о способах программирования подобно тому, как тезис Чёр¬ 
ча уточняет наши интуитивные представления о вычисли¬ 
мости. При неформальном понимании способа программи¬ 
рования тезис (ГМ), так же как и тезис Чёрча, нельзя до¬ 
казать в обычном математическом смысле; но его можно 
подтверждать, рассматривая различные представительные 
вычислительные Модели и различные точно описанные спо¬ 
собы программирования. (Важное различие: тезис Чёрча 
дает точное описание класса вычислимых функций, в то 
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время как здесь мы имеем лишь «верхнюю оценку» для клас¬ 
са всех способов программирования!) Утверждение о том, 
что свойство (ГМ) выполнено для некоторого конкретного 
способа программирования (связанного с рекурсивными 
функциями), составляет содержание клиниевой 5 — т — 
п-теоремы (точнее, 5— 1—1-теоремы), см. [Роджерс, 1967, 
§ 1.8]. О связи 5 — т — п-теоремы с программистскими 
понятиями см. [Ершов А., 1981], [Ершов А., 1982, п. 3.2], 
[Ершов, 1984]. 

Все указанные свойства результатных функций, со¬ 
ответствующих известным способам программирования, 
можно обратить в требования, накладываемые на произ¬ 
вольную функцию V. Мы приходим тогда к следующим оп¬ 
ределениям. 

Пусть А, У, Е — некоторые множества конструктивных 
объектов, V — вычислимая функция из ЕхХ в У. Функцию 
V назовем универсальной функцией для X, V с индексным 
множеством Е, если для нее выполнено такое условие: 

(У) для каждого X —У-алгоритма 31 существует такое 
в 6 Е, что для всех х^Х выполнено условное равенство 

Щ (х) ~ V (е, х). 

Пусть А и У — ансамбли. Существование универсальной 
вычислимой функции для А, У с индексным множеством А 
немедленно приводит диагональным методом к такому важ¬ 
ному результату, как существование породимых неразре¬ 
шимых множеств, ср. § 1.10. 

1.14.3. Главные, или гёделевы, универсальные функции. 
Вычислимую функцию V из ЕхХ в У назовем г еде левой, 
или главной, функцией для X, У с индексным множеством 
Е, если для нее выполнено такое условие: 

(Г) для каждого породимого множества 1 и для каждого 
алгоритма Щ; / X А->У существует алгоритм 3!): 1->Е с об¬ 
ластью определения /, для которого 31 «і, х))~Ѵф(і), х) 
при всех хбА, і'6/. 

(Очевидно, условие (У) вытекает из условия (Г).) С по¬ 
мощью введенных определений можно переформулировать 
сказанное ранее — и выраженное в свойствах (УМ), (ГМ) — 
так: для любого способа программирования результатная 
функция V является универсальной и даже гёделевой функ¬ 
цией для А, У с индексным множеством Р (здесь А, У и 
Р — входной, выходной и программный ансамбли). Для 
произвольных ансамблей А, У, Е существуют функции, 
обладающие свойством (У), но не свойством (Г). Эти 
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функции, однако, не соответствуют никаким способам 
программирования и конструируются с помощью' искус¬ 
ственного приема. 

Пусть по-прежнему фиксирована вычислительная мо¬ 
дель с соответствующими ансамблями X, V, Р и какой-либо 
способ программирования для этой модели. Рассмотрим 
какую-либо вычислимую функцию / из X в У. Любая про¬ 
грамма любого X — У-алгоритма, вычисляющего /, назы¬ 
вается программой функции /. Мы получаем тем самым не¬ 
которое соответствие между элементами Р и вычислимыми 
функциями, при котором каждому р^Р соответствует 
функция / с программой р. 

Говоря формально, это соответствие есть некоторое 
подмножество произведения ЯхСош (X, V). Очевидно, 
оно полностью задается результатной функцией V. По 
этой причине саму эту результатную функцию часто назы¬ 
вают способом программирования или методом программиро¬ 
вания — см., например, [Колмогоров, 1965, §3]; при этом, 
подчеркнем еще раз, имеют в виду соответствие не меж¬ 
ду программами и алгоритмами, а между программами 
и вычисляемыми этими алгоритмами функциями (так что 
более точным было бы говорить о способе программи¬ 
рования вычислимых функций). Само указанное соот¬ 
ветствие рн>/ также называют способом программирова¬ 
ния. Итак, мы различаем способы (методы, системы) про¬ 
граммирования алгоритмов и возникающие на их основе 
способы (методы, системы) программирования вычислимых 
функций. Как уже отмечалось, способы программирова¬ 
ния функций выделяются среди всевозможных функций 
из РхХ в К тем, что они (среди прочих, не полностью, быть 
может, нам известных свойств) обладают свойством гёде- 
левости. Поэтому указанное свойство гёделевости — для 
подходящего ансамбля Е в качестве индексного множест¬ 
ва — само может быть предложено (и, действительно, было 
предложено в докладах [Успенский, 1956], [Успенский, 
1956а]) в качестве формального определения понятия спо¬ 
соба программирования вычислимых функций (и тем самым 
косвенно — в качестве определения понятия программы 
функции ). 

Согласно этому определению, способ программирова¬ 
ния отождествляется с главной, или гёделевой, универ¬ 
сальной функцией. Гёделевы универсальные функции (точ¬ 
нее, сопряженные с ними гёделевы нумерации, см. § 1.15) 
со временем начали трактоваться в современных журналах 
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ПО вычислительной математике в качестве «простых моде¬ 
лей для языков программирования», как в [Хартманне, 
Бейкер, 1975], или даже просто отождествляться с «систе¬ 
мами программирования» («ргоагаттіщ вуаіетз»), как в 
[Мачти, Винкльман, Янг, 1978]. 

Совокупность всех способов программирования (отож¬ 
дествляемых с гёделевыми универсальными функциями 
при фиксированных X, У, Е) оказывается неперечисли¬ 
мой [Душский, 1975] — в том точном смысле, что не обла¬ 
дает вычислимой нумерацией (о них — в § 1.15). 

Развитие теории алгоритмов показало, что ни конкрет¬ 
ный выбор вычислительной модели, ни конкретный выбор 
способа программирования (при фиксированной модели) 
почти не влияет на то, какие теоремы о вычислимых функ¬ 
циях и их программах окажутся справедливыми; мы гово¬ 
рим «почти», имея в виду некоторые исключения, связанные 
с понятием объема (или нормы) программы (см. об этом 
далее). Таким образом, можно утверждать, что (в широких 
пределах) возможна единая теория способов программирова¬ 
ния вычислимых функций. Объяснение этому явлению 
дают теорема Мучника об изоморфизме вычислительных 
структур, которая будет сформулирована несколькими стро¬ 
ками ниже и теорема Роджерса об изоморфизме гёделевых, 
или главных, нумераций, которая будет сформулирована в 
§ 1.15. Из теоремы Роджерса вытекает, что если Х,У, Е — 
произвольные ансамбли, а V* и Ѵ 2 —произвольные гёделевы 
функции для X, У с индексными множествами соответствен¬ 
но Еі и Е г , то не только существуют алгоритмы «трансляции» 
в обе стороны, что, очевидно, вытекает из определения гё- 
делевости, но можно выбрать эти алгоритмы так, чтобы 
они вычисляли взаимно обратные функции: существует та¬ 
кой изоморфизм е ансамблей Еі и Е 3 , что для любых е б Еі, 
х^Х выполнено условное равенство 

Ѵ 2 (е(е), х) ~ {е, х). 

1.14.4. Вычислительные структуры. Понятие вычис¬ 
лительной структуры введено Ан. А. Мучником в статье 
[Мучник Ан., 1985], где сказано: 

«Рядом авторов высказывалась точка зрения, согласно 
которой теория алгоритмов есть теория одного, универ¬ 
сального, алгоритма (см. [Успенский, Семенов, 1982]). 
Приводимая ниже теорема является точным математиче¬ 
ским подтверждением этого тезиса,» Излагаемые в этом пунк- 
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те понятия и результаты принадлежат Ан. А. Мучнику и 
взяты из цитированной статьи. 

В теории алгоритмов принципиальным является рас¬ 
смотрение частичных функций. Поэтому здесь будем рас¬ 
сматривать структуры (алгебраические системы) с частич¬ 
ными операциями, специально этого не оговаривая. Через 
! х будем обозначать функцию Яу/ (х, у), т. е. одноместную 
функцию, получаемую фиксацией первого аргумента в/ (х, у). 

Пусть Р (х, у) — некоторая главная (гёделева) универ¬ 
сальная функция из N в N. Тогда пару Ш; Р) назовем вы¬ 
числительной структурой. 

Теорема Ан. Мучника. Все вычислительные структуры 
изоморфны. 

Конечно, не обязательно требовать, чтобы носителем 
структуры был натуральный ряд N. В качестве такового 
можно взять любой ансамбль конструктивных объектов. 
Пусть (№, Р), <№, О) — две вычислительные структуры. Ут¬ 
верждение теоремы состоит в существовании такой биекции 
Н: N->N, что Р(х, у)— 2 <$С (Н (х), Н(у))=Н(г). Оказыва¬ 
ется, всегда существует даже вычислимая Н (вычислимый 
изоморфизм). Иначе говоря, при всяком х из N должно 
быть выполнено Р х = Н~ 1 о О н (х) о Н. 

Естественно, возникает вопрос: что будет, если в теоре¬ 
ме Ан. Мучника вместо вычислимости рассматривать отно¬ 
сительную вычислимость, т. е. вычислимость при помощи 
алгоритма с оракулом? Оказывается, все структуры, от¬ 
вечающие одному и тому же оракулу (или эквивалентным 
оракулам), изоморфны (причем с изоморфизмом, вычисли¬ 
мым относительно того же Оракула). Иначе говоря, реля- 
тивизуема сама теорема Мучника (см. [Мучник Ан., 1985]). 

Назовем А-вычислительной структурой структуру, опре¬ 
деление которой получается из определения вычислитель¬ 
ной структуры заменой вычислимости на вычислимость с 
оракулом А. Можно показать, что при невычислимом А А- 
вычислительная структура не изоморфна и даже не эле¬ 
ментарно эквивалентна вычислительной структуре (без ора¬ 
кула). 

Пусть Ф — некоторое свойство структур рассмотренной 
сигнатуры (с единственной двуместной частичной функцией; 
мы рассматриваем лишь свойства, устойчивые относительно 
изоморфизма структур). Тогда в силу теоремы Ан. Мучника 
для каждого оракула А либо Ф истинно для всех Л-вычис¬ 
лительных структур, либо Ф ложно для них всех. Тем са¬ 
мым возникают три возможности: 
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1) Ф истинно для Л -вычислительных структур при лю¬ 
бом Л; 

2) Ф ложно для Л-вычислительных структур при лю¬ 
бом Л; 

3) Ф истинно для одних Л-вычислительных структур 
и ложно для других, с другим Л. 

В случаях 1) и 2) Ф естественно назвать релятивизуемо 
истинным или релятивизуемо ложным свойством, а в слу¬ 
чае 3) — нерелятивизуемым. Оказывается, большинство 
естественных утверждений теории алгоритмов относится к 
релятивизуемым свойствам. Мы увидим сейчас, что можно 
без апелляции к понятию вычислимости отделить реляти¬ 
визуемо истинные утверждения от релятивизуемо ложных. 
Для этого нам понадобится игра, которую мы сейчас оп¬ 
ределим согласно [Мучник Ан., 1985]. 

Игра. В игре участвуют 2 игрока — Природа (П) и 
Математик (М). Каждый из игроков постепенно строит свою 
структуру вида <Р*|; Р), где Р — частичная функция N X N в N. 
(При этом вместо N можно взять любое счетное множество. 
Строение натурального ряда не используется.) В начале 
игры Р—0\ на каждом шаге происходит доопределение 
функций в конечном числе точек. Изменять определенные 
раньше значения функций нельзя. Игроки делают ходы по 
очереди. Таким образом, правила хода всегда одни и те же, 
возможные ходы не зависят от ходов противника. Различие 
между конкретными играми определяется функцией вы¬ 
игрыша (эта функция, как мы увидим, соответствует тому 
свойству, истинность которого хочет установить Матема¬ 
тик). Пусть фиксировано свойство Ф структур рассматри¬ 
ваемого класса. Тогда в Ф-игре выигрывает Природа, если 
она построила такую функцию ѵ, а Математик — такую 
функцию р, что 

(ВП1) Ф ложна в (М; ѵ); 

(ВП2) существует такое число е , что ѵ е всюду определена 
и для любого х выполнено р*=»=Ѵѵ в (*>. 

В противном случае (если Природа не выигрывает) 
выигрывает Математик. 

Как мы видим, от свойства Ф зависит только условие 
(ВП1), но оно не зависит от р. Условие (ВП2) означает, 
что нумерация одноместных функций, построенная Мате¬ 
матиком, сводится к нумерации одноместных функций, 
построенной Природой, причем сама сводящая функция 
также построена Природой. 
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Следующее утверждение позволяет отделить релятиви- 
зуемо истинные утверждения от релятивизуемо ложных в 
терминах описанной игры: если Ф релятивизуемо истинно, 
то существует выигрышная стратегия для М; если Ф реля¬ 
тивизуемо ложно, то существует выигрышная стратегия 
для П. 

Это утверждение вытекает из следующей теоремы [Муч¬ 
ник Ан., 1985]. 

Теорема. Имеют место следующие эквивалентности (В — 
произвольное множество натуральных чисел; озна¬ 

чает разрешимость В относительно А): 

а) (свойство Ф выполнено для всех А-вычислительных 
структур, для которых В^ Г Л) ФФ (существует выигрышная 
стратегия для М в Ф-игре, вычислимая относительно В); 

б) (свойство Ф ложно для всех А-вычислительных струк¬ 
тур, для которых В<! Г А) фф (существует выигрышная стра¬ 
тегия для П в Ф-игре, вычислимая относительно В). 

Эта теорема дает схему доказательства релятивизуемой 
истинности некоторого свойства: нужно построить вычис¬ 
лимую выигрышную стратегию для М в Ф-игре. Анализ 
обычных доказательств теории алгоритмов показывает, что 
большинство их легко укладывается в эту схему, причем 
основную часть доказательства составляет описание страте¬ 
гии и проверка того, что она выигрышная; вычислимость ее 
устанавливается легко. 

В приведенном ниже следствии слова «...для всех доста¬ 
точно больших А» означают «существует такое множество 
Вс:^, что... для всех АсгпІ, для которых В^ Г А». 

Следствие. Имеют место следующие эквивалентности: 
(свойство Ф выполнено для А-вычислительных структур 
при достаточно больших А) ФФ (существует выигрышная 
стратегия для М в Ф-игре); (свойство Ф ложно для А-вы- 
числительных структур при достаточно больших А)Ф=» 
Ф=» (существует выигрышная стратегия для П в Ф-игре). 

Отметим, что отсюда и из теоремы о детерминированнос¬ 
ти борелевских игр вытекает следующий результат Марти¬ 
на: если Ф — борелевское свойство, то либо Ф, либо отри¬ 
цание Ф выполнено для всех А-вычислительных структур 
при достаточно больших А. 

1.14.5. Экономные по норме, или оптимальные функции. 
Требование гёделевости (Г) не накладывает никаких огра¬ 
ничений на алгоритм 33. В частности, норма объекта 33 (I) 
может значительно превышать норму объекта і. Мы можем 
стремиться исключить такую возможность и потребовать, 
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чтобы выполнялось неравенство п (35(0) -р «(О- (Разумеется, 
все сказанное имеет смысл только в том случае, если / и Е 
являются нормированными ансамблями.) Неравенство 
п (2) (/)) ~ п ( і ) означает, что 2) (г) не содержит «ничего или 
почти ничего лишнего» по сравнению с і. 

Дадим соответствующие определения. Пусть Е — нор¬ 
мированный ансамбль. Будем называть вычислимую функ¬ 
цию Ѵі X х Е->Ѵ оптимальной, или экономной по норме, 
если выполнено такое свойство; 

(О) для всякого нормированного ансамбля / и всякого 
алгоритма Щ ; ІхХ-^У существует ограниченно-искажаю- 
щий алгоритм 3)і І-*-Е с областью определения I, для ко¬ 
торого 31 ((і, х))сйУ(35(0, х) при всех х^Х, і^.1- 

Заметим, что поскольку между любыми двумя нормиро- - 
ванными ансамблями существует (ограниченно-искажающий) 
изоморфизм, то вместо слов «для всякого нормированного 
ансамбля» в этом определении можно было бы (без изме¬ 
нения класса оптимальных функций) говорить о каком-то 
фиксированном нормированном ансамбле, например об ан¬ 
самбле двоичных слов. Заметим также, что свойства (У) 
и (Г), как нетрудно проверить, являются следствиями 
свойства (О). (То обстоятельство, что в свойстве (О) множе¬ 
ство / является не произвольным породимым множеством, 
а ансамблем, как легко проверить, несущественно.) 

Первый же вопрос, возникающий в связи с этим опреде¬ 
лением, таков; а существуют ли вообще оптимальные функ¬ 
ции? Оказывается, что ответ на этот вопрос положителен; 
оптимальную функцию нетрудно построить, используя 
идеи Колмогорова из [Колмогоров, 1965]. Это построение 
можно иайти в [Агафонов, 1975, с. 44] или в [Шнорр, 1975] 
(в работе Шнорра рассматриваются не оптимальные уни¬ 
версальные функции, а так называемые оптимальные ну¬ 
мерации, но это различие несущественно, см. § 1.15). 

Другой интересный вопрос, возникающий в связи с 
понятием оптимальности, таков; приводят ли известные 
способы программирования к оптимальным функциям. Как 
правило, возникающие результатные функции оказывают¬ 
ся неоптимальными (см. [Агафонов, 1975, с. 45]). 

Мы уже упоминали выше теорему Роджерса об изомор¬ 
физме гёделевых нумераций. Оказывается, что аналогич¬ 
ная теорема — об изоморфизме любых двух оптимальных 
нумераций — также имеет место; она доказана Шнорром 
(см. § 1,15). Из нее вытекает, что для любых двух оптималь- 
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ных гёделевых универсальных функций Ѵі и У» для X и У 
с индексными множествами Б± и Е г существует такой (огра- 
ниченно-искажающий) изоморфизм и нормированных ан¬ 
самблей Еі и Е а , что для любых е^Е± их €Х выполнено ус¬ 
ловное равенство 


У й (и(е), х)~.Ѵі(е, х). 

Представляют интерес и другие требования, которые 
можно пытаться наложить на гёделевы универсальные функ¬ 
ции. Можно хотеть, к примеру, чтобы транслятор ЗЬ был 
достаточно быстро работающим алгоритмом, например тре¬ 
бовал бы не более чем полиномиального времени. (См. об 
этом в § 1.15 в связи с понятием полиномиально главной 
нумерации.) 

1.14.6. Программирование исчислений. Все сказанное 
выше об алгоритмах и их программах можно повторить и длц 
исчислений. С каждым способом программирования (для 
данной порождающей модели и данного ансамбля У) будет 
связан тогда программный ансамбль Р и множество V 
сРхУі состоящее из тех пар (р, у), для которых у принад¬ 
лежит множеству, порожденному исчислением с програм¬ 
мой р. Это множество (которое естественно назвать резуль¬ 
татным множеством данного способа программирования 
исчислений) оказывается породимым; исчисления, его по¬ 
рождающие, естественно называть универсальными исчис¬ 
лениями для данного спосрба программирования. Нетрудно 
сформулировать аналоги (У), (Г'), (О') требований (У), 
(Г) и (О) для произвольного перечислимого подмножества 
ѴсЕхУ; как и в случае алгоритмов, множества, соответ¬ 
ствующие известным способам программирования, удовлет¬ 
воряют требованиям (У') и (Г ? ). 

Понятие универсального исчисления можно понимать и 
в более широком смысле, введя некоторую кодировку пар. 
Именно, пусть задан некоторый способ кодирования пар <р, 
сопоставляющий с каждой парой ( е, у) некоторый элемент 
ансамбля кодов 2. Тогда с каждым исчислением, порождаю¬ 
щим объекты ансамбля 2, будет связано множество ѴсЕхУ, 
состоящее из тех пар (е, у), код <р ((е, у)) которых порожда¬ 
ется этим исчислением. Если это множество обладает свой¬ 
ством (У') (т. е. для всякого породимого множества 5 
объектов ансамбля У существует такой объект е^Е, что 
свойства у € 5 и (е, у)$Ѵ равносильны), то исходное ис¬ 
числение можно назвать ундверездьщм в щдаком сщеде. 
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Многие логистические системы (исчисление предикатов, 
формальная арифметика, аксиоматическая теория множеств) 
оказываются универсальными исчислениями в таком широ¬ 
ком понимании. Эти универсальные исчисления появились 
в математике до формирования общего понятия исчисления. 
Поскольку всю (дескриптивную) теорию исчислений допу¬ 
стимо трактовать как теорию какого-нибудь одного уни¬ 
версального исчисления (ср. с трактовкой в § 1.4 теории 
алгоритмов как теории одного универсального алгоритма), 
можно считать, что уточнения понятия исчисления и общая 
теория исчислений возникли раньше, чем общее понятие 
исчисления. В этом — своеобразие развития понятия исчис¬ 
ления, отличающее это развитие от развития понятия ал¬ 
горитма (ведь все алгоритмы, возникшие в математике до 
создания общей теории алгоритмов, ни в каком смысле не 
могут рассматриваться как универсальные!). 

Отметим теперь связь между способами программирова¬ 
ния алгоритмов и способами программирования исчислений. 
Пусть задан способ программирования алгоритмов с вход¬ 
ным ансамблем X и выходным ансамблем У, а также способ 
программирования исчислений с ансамблем ХхУ. Тогда 
каждая вычислимая функция из X и У имеет как вычисли¬ 
тельные программы, так и (рассматриваемая как породимое 
подмножество множества X X У) порождающие программы. 
Возникает вопрос: можно ли эффективно переходить от про¬ 
грамм одного типа к программам другого типа (для той же 
функции)? Ответ, как и следовало ожидать, оказывается 
положительным — такая возможность обеспечивается свой¬ 
ством (Г), справедливым для способа программирования 
алгоритмов, и его аналогом (Г')> справедливым для спо¬ 
соба программирования исчислений. 

1.14.7. Преобразования программ. Введение понятия 
способа программирования (а на абстрактном уровне — по¬ 
нятия гёделевой универсальной функции и соответствующе¬ 
го понятия для множеств) позволяет сформулировать ряд 
важных результатов теории алгоритмов. Приведем сейчас 
некоторые из них. 

Вторая теорема о рекурсии, принадлежащая Клини 
(см. [Роджерс, 1967 , гл. Ш), утверждает, что невозможен 
алгоритм, преобразующий всякую программу вычислимой 
функции в программу совершенно другой (т. е. отличной от 
исходной) вычислимой функции; аналогичное утверждение 
справедливо для программ перечислимых множеств. (На 
самом деле справедливо даже несколько более сильное ут- 
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верждение, позволяющее «эффективно» находить для всякого 
преобразующего программы алгоритма ту программу, ко¬ 
торая переводится им в программу той же самой функции. 
Однако возможен алгоритм с оракулом, обладающий толь¬ 
ко что описанным свойством. Более того, в [Арсланов, 1981] 
найден следующий критерий: перечислимое множество А 
тогда и только тогда полно, когда существует алгоритм с 
оракулом А, преобразующий программу любой вычислимой 
функции в программу другой функции, отличной от задан¬ 
ной. Дальнейшие обобщения этого результата позволяют 
сформулировать аналогичные критерии для широкого клас¬ 
са множеств арифметической иерархии (см. [Арсланов, 
1985а], [Арсланов, 1986]). 

Естественно задаться вопросом, какие свойства вычис¬ 
лимых функций (или породимых множеств) можно алгорит¬ 
мически распознать по их программам; оказалось, что ни¬ 
какие, кроме тривиальных (см. [Райс, 1953], [Успенский, 
1955а], [Успенский, 1960]). Замечательно, что этот факт 
оказался следствием топологической связности системы всех 
породимых множеств и системы всех вычислимых функций 
при той естественной топологии, которая упоминалась в 
§1.13. В самом деле, множество всех программ множеств 
(или функций), удовлетворяющих (а также не удовлетворя¬ 
ющих) какому-либо свойству, алгоритмически распознава¬ 
емому по программам, перечислимо; с другой стороны, лю¬ 
бая совокупность множеств или функций, для которой все 
программы членов этой совокупности образуют перечис¬ 
лимое множество (такая совокупность называется вполне 
перечислимой), оказывается открытой в указанной тополо¬ 
гии (см. [Успенский, 1955а]). 

Пусть фиксирован некоторый способ программирования 
исчислений. Тогда каждая вычислимая операция Ф оче¬ 
видным образом приводит к алгоритму, переводящему каж¬ 
дую программу порождения какого-либо множества А 
в некоторую программу порождения результирующего мно¬ 
жества Ф(А). Теорема о том, что любая вполне перечисли¬ 
мая совокупность множеств открыта в топологии из § 1.13, 
служит также для установления следующего принципиаль¬ 
ного результата (обратного к упомянутому в начале этого 
абзаца очевидному факту): любой алгоритм, переводящий 
всякую программу в программу же, причем так, что про¬ 
граммы одного и того же переводятся в программы одного 
и того же, соответствует некоторой вычислимой операции 
(см. [Успенский, 1955а], [Майхилл, Шепердсон, 1955]). 
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Более точно, пусть X и V — перечислимые множества, Р -аг 
(частичное) отображение из (Зеп(Х) в Оеп ( V), задаваемое 
(в разъясняемом ниже смысле) вычислимой функцией <р 
на программах: если р — программа для А 6 Оеп (X) и 
Р (Л) не определено, то ср(р) не определено; если Р(А) 
определено, то <р (р) определено и представляет собой про¬ 
грамму для Р(А). В том случае отображение Р может быть 
продолжено до вычислимой операции, отображающей 2 х 
в 2 У . 

То же самое верно и для частичных отображений из 
Сот (X, У) в Сот (О, V), для программ вычислимых функ¬ 
ций и вычислимых операторов. Сходная теорема верна и 
для алгоритмов, которые применимы к любой программе 
всюду определенной функции и дают в качестве результата 
программу другой всюду определенной функции, завися¬ 
щей только от первой (но не от того, какая из ее программ 
взята): любому такому алгоритму соответствует вычисли¬ 
мый оператор (см. [Дейтин, 1962, теорема 2]). 


§1.15. Понятие нумерации и теория нумераций 

1.15.0. Нумерацией (или, более точно, числовой нумера¬ 
цией) множества М называется произвольное отображение а 
произвольного множества ЕсЬі на М; если при этом 
а(е)=т, то е называется а-номером, илн номером, эле¬ 
мента т (см. [Успенский, 1955а], [Успенский, 1960, §11], 
[Мальцев, 1961, п. 2.1], [Мальцев, 1965, гл. IV]). 

Множество Е называется основанием нумерации а (как 
в [Успенский, 1960]) или номерным множеством (как в 
[Мальцев, 1961], [Мальцев, 1965]) нумерации а. Если Е— N. 
нумерация называется натуральной , как в [Успенский, 
1960], или простой, как в [Мальцев, 1961], [Мальцев, 1965, 
п. 9.1]. Иногда (например, в [Лавров И., 1982]) термин 
«нумерация» употребляется как синоним термина «нату¬ 
ральная нумерация». Если каждый элемент имеет только 
один номер (т. е. а является взаимно однозначным соответ¬ 
ствием), нумерация называется нумерацией без повторений 
или однозначной нумерацией (см. [Мальцев, 1961], [Маль¬ 
цев, 1965, п. 9.1]). Нумерация называется разрешимой, 
если существует алгоритм, который применим к любой па¬ 
ре элементов из Е и дает ответ на вопрос, являются они 
или нет номерами одного и того же элемента из М (см. 
[Мальцев, 1961]). 
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При естественном более широком понимании понятия «у. 
мерации основанием нумерации может служить любое под¬ 
множество любого ансамбля. Определения однозначности 
и разрешимости нумераций переносятся на общий случай 
без изменений. В роли натуральных нумераций выступают 
в этом случае нумерации, у которых основанием слу¬ 
жит весь ансамбль. Такие нумерации называются тоталь¬ 
ными. 

Пусть нумерации аир одного и того же множества 
имеют соответственные основания Е и Р; они называются 
изоморфными (см. [Мальцев, 1961, п. 2.1], [Ершов Ю., 
1977, гл. 2, § 1]), если для них существует изоморфизм, 
т. е. такое вычислимое взаимно однозначное соответствие 
/ между Е и Р, что для всякого е^Е выполнено а(е)=> 
=Р (}(е)). Говоря о вычислимости соответствия /, мы имеем 
в виду, что отображения / и / -І являются сужениями не¬ 
которых вычислимых функций на множества Е и Р соот¬ 
ветственно. Очевидно, всякая нумерация изоморфна неко¬ 
торой числовой, а всякая тотальная нумерация изоморфна 
некоторой натуральной; поэтому, если пренебречь изомор- 
фиями, можно ограничиться числовыми нумерациями; в 
частности, изучение тотальных нумераций можно заме¬ 
нить изучением натуральных нумераций. 

Примеры нумераций. 

1. Отображение, относящее каждому имени из некоторой 
совокупности имен его денотат (т. е. предмет, носящий это 
имя; см. [Чёрч, 1956, § 01]); это главная философская моти¬ 
вировка теории нумераций. 

2. Для фиксированного способа программирования отоб¬ 
ражение, относящее каждой программе задаваемую ею вы¬ 
числимую функцию или задаваемое ею породимое множество 
(см. [Успенский, 1956], [Успенский, 1956а]); это главная 
математическая мотивировка теории нумераций. 

3. Система обозначений для ординалов (см. [Роджерс, 
1967, § 11.7]); это главная историческая мотивировка теории 
нумераций. 

Все перечисленные примеры представляют собой, вообще 
говоря, не тотальные нумерации. Нумерация из второго 
примера может быть превращена в тотальную с помощью 
приема, указанного в начале § 1.14 и позволяющего каждый 
элемент программного ансамбля рассматривать как про¬ 
грамму. 

Алгебраический пример. Каждый из вы¬ 
шеприведенных трех примеров дает, конечно, не какую-то 
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одну нумерацию, а целую серию нумераций. Среди «фи¬ 
лософских» нумераций первой серии имеются нумерации, 
имеющие ясный алгебраический смысл. Речь идет о нуме¬ 
рациях конечно порожденных алгебр. Пусть некоторая 
алгебраическая система конечно порождена, т. е. имеет 
конечное число образующих и конечную сигнатуру. Пусть 
алфавит Б содержит все имена а ъ а 2 , . . . образующих, все 
имена /, §, . . . сигнатурных операций, левую и правую 
скобки и запятую. В ансамбле Б-слов возникает подмно¬ 
жество всевозможных замкнутых (т. е. не содержащих 
переменных) термов вида §(а ъ , /(а 2 , а г ), а ъ ) и т. п. (ср. до¬ 
бавление к § 1.3). Каждый из таких термов обозначает не¬ 
который (и притом только один) элемент нашей алгебры, 
причем разные термы могут обозначать один и тот же эле¬ 
мент. Тем не менее обычно говорят «элемент /(а 2 , а г )», а 
не «элемент, обозначенный через /(а 2 , а г )»; такое словоупот¬ 
ребление показывает, что мы используем выражение «/(а 2 , 
ах)» так, как используют имя объекта. Итак, терм «/(а 2 , а х )» 
следует рассматривать как имя некоторого элемента алгеб¬ 
ры (являющегося, в свою очередь, денотатом этого терма); 
один и тот же элемент может иметь много имен. Поскольку 
а,, а г , ... суть образующие, отображение, сопоставляю¬ 
щее с каждым термом его денотат, представляет собой сюръ¬ 
екцию, т. е. отображение на весь носитель рассматриваемой 
алгебраической системы. Таким образом, указанное ото¬ 
бражение есть нумерация носителя; допуская вольность ре¬ 
чи, об этой нумерации говорят как о нумерации самой алге¬ 
браической системы. Следуя Мальцеву (см. [Мальцев, 
1961, п. 4.1]), эту нумерацию будем называть стандартной. 
(Строго говоря, в [Мальцев, 1961] стандартной называется 
не сама только что построенная нумерация, а некоторая 
изоморфная ей числовая нумерация.) Очевидно, что осно¬ 
вание стандартной нумерации породимо (перечислимо) и 
даже разрешимо. 

Нумерация а называется позитивно если породимо 
(=перечислимо) как ее основание Е, так и подмножество 
КсР всех таких пар (е и е г ), для которых а(еі)=а(е 2 ) 
(см. [Мальцев, 1961, п. 2.1]). 

Алгебраический пример (продолжение). 
Пусть алгебраическая система не только конечно порожде¬ 
на, но и конечно задана, т. е. задана конечным числом ква¬ 
зитождеств. Как мы видели в добавлении к § 1.3, породимо 
множество всех таких пар {и, /,), что термы ^ и і 2 равны 
в рассматриваемой системе, т. е. обозначают один и тот 
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же элемент. Поэтому стандартная нумерация всякой ко¬ 
нечно заданной алгебраической системы позитивна. 

Пусть аир — две нумерации множества М. Про функ¬ 
цию, которая по любому а-номеру любого элемента из М 
дает какой-то Р-номер того же элемента, говорят, что она 
сводит а к Р (см. [Успенский, 1960, § 111, [Мальцев, 1961, 
п. 2.2]). Говорят, что а сводится по Колмогорову к р, если 
существует вычислимая функция, сводящая а к р. Наконец, 
две нумерации называются эквивалентными относительно 
колмогоровской сводимости или, короче, эквивалентными 
по Колмогорову, если они сводятся друг к другу по Колмо¬ 
горову. 

В ситуации, когда не рассматриваются иных видов сво¬ 
димости и эквивалентности, слова «по Колмогорову» опуска¬ 
ются. Именно такая ситуация имеет место в настоящем па¬ 
раграфе, и потому мы будем говорить просто о сводимости 
и эквивалентности нумераций. (В § 2.5 нам предстоит рас¬ 
смотреть и другие виды сводимости и эквивалентности.) 

Отношение сводимости задает на совокупности всех 
(числовых) нумераций фиксированного множества М пред- 
порядок. Тем самым на совокупности всех классов эквива¬ 
лентности возникает частичный порядок. Частично упоря¬ 
доченное множество классов эквивалентности оказывается 
при этом верхней полурешеткой. То же построение можно 
проделать только для натуральных нумераций. В этом слу¬ 
чае мы также получим верхнюю полурешетку, которая, 
очевидно, изоморфно вложена в первую. 

Идея абстрактного изучения нумераций была впервые 
высказана (в связи с изучением систем обозначений для ор¬ 
диналов) Колмогоровым в феврале 1954 г. на руководимом 
им семинаре по рекурсивной арифметике в Московском 
университете (именно, Колмогоров сформулировал общее 
понятие числовой нумерации и понятие сводимости нуме¬ 
раций). Эта идея получила развитие в исследованиях Маль¬ 
цева (собранных впоследствии в [Мальцев, 1976]) и его уче¬ 
ника Ю. Л., Ершова. Монографии [Мальцев, 1965] и [Ер¬ 
шов Ю., 1977] подытоживают эти исследования. 

Теорию нумераций можно считать новой самостоятель¬ 
ной областью математики, рожденной теорией алгоритмов. 
Самостоятельность этой новой области оправдывается на¬ 
личием в ней глубоких математических результатов, как 
почти очевидных, так и совершенно неожиданных и нетри¬ 
виальных. Вот пример результата первого типа: тотальная 
нумерация бесконечного множества является разрешимой 
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тогда и только тогда, когда она эквивалентна некоторой 
однозначной тотальной нумерации того же множества 
(см. [Ершов Ю., 1977, гл. 1, §3]; мы сошлемся на этот ре¬ 
зультат ниже, в § 2.5). А вот пример результата второго ти¬ 
па! для любых двух неодноэлементных конечных множеств 
верхняя полурешетка классов эквивалентных натуральных 
нумераций одного множества изоморфна верхней полуре- 
шетке классов эквивалентных натуральных нумераций 
другого множества (см. [Ершов Ю., 1977, приложение II]). 

Наиболее разработана теория тотальных нумераций 
(ср. [Ершов Ю., 1977, с. 12]). При переходе к нетотальным 
нумерациям возникают новые эффекты: существует, на¬ 
пример, разрешимая нумерация бесконечного множества, 
не эквивалентная никакой однозначной нумерации (см. 
[Шень, 1981]). Как указано выше, для тотальных нумераций 
этого не бывает, поэтому нумерация с таким свойством не 
эквивалентна никакой тотальной. Другим примером ну¬ 
мераций, не эквивалентных тотальным, служат нумерации 
конструктивного континуума, рассматриваемые в § 2.4. Ос¬ 
нования этих нумераций неперечислимы: действительно, 
как легко видеть, всякая нумерация с перечислимым осно¬ 
ванием эквивалентна тотальной. 

1.15.1. Вычислимые нумерации. Большое количество 
понятий и результатов теории нумераций возникло из изу¬ 
чения нумераций, связанных со способами программиро¬ 
вания (см. второй из приведенных примеров). Некоторые 
из этих понятий, по существу, уже обсуждались в предыду¬ 
щем параграфе. Дело в том, что имеется естественное вза¬ 
имно однозначное соответствие между тотальными нуме¬ 
рациями семейств функций из X в К с основанием Е 
и функциями из ЕхХ в К. Именно, каждой функции Р 
из ЕхХ в У соответствует нумерация, при которой 
объект е € Е является номером функции Р е \ х-+(е, х). В об¬ 
ратную сторону: каждой тотальной нумерации соответству¬ 
ет функция, относящая паре ( е , х) значение функции с но¬ 
мером е на элементе х. Если данная функция и данная 
нумерация соответствуют друг другу при описанном только 
что взаимно однозначном соответствии, то мы будем назы¬ 
вать их сопряженными. Теперь мы можем перевести неко¬ 
торые введенные в § 1.14 понятия на язык теории нумера¬ 
ций. Пусть X, У и Е — некоторые ансамбли. 

1. Тотальная нумерация а семейства функций из X в 
У с основанием нумерации Е называется вычислимой (см. 
[Успенский, 1955а], [Лавров И,, 1977]), если сопряженная 
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с ней функция, т. е функция, сопоставляющая паре { е, 
значение функции с номером е на элементе х, является вы¬ 
числимой. 

2. Тотальная вычислимая нумерация семейства Сот 
(X, У) с основанием нумерации Е называется главной (см. 
[Успенский, 1955а], [Успенский, 1960, § 11]), или гёделевой, 
если сопряженная с ней функция является гёделевой уни¬ 
версальной функцией; как легко видеть, это эквивалентно 
тому, что всякая вычислимая нумерация семейства Сот 
(X, У) сводится к ней. 

. 3. Пусть ансамбль Е нормирован. Тогда имеет смысл 
говорить об оптимальных нумерациях. Именно, тотальная 
вычислимая нумерация семейства Сот (X, У) о основанием 
нумерации Е называется оптимальной, или шнорровой, 
или экономной по объему номеров , если сопряженная с ней 
функция является оптимальной гёделевой универсальной 
функцией; как легко видеть, это эквивалентно тому, что 
всякая вычислимая нумерация семейства Сот (X, У), ос¬ 
нование которой является нормированным ансамблем, 
сводится к ней с помощью ограниченно-искажающего ал¬ 
горитма. 

Как видно из этих определений, всякая главная нуме¬ 
рация вычислима, а всякая шноррова нумерация — глав¬ 
ная. Как отмечалось в § 1.14, оптимальные гёделевы уни¬ 
версальные функции существуют; тем самым существуют и 
шнорровы (и, тем более, главные и вычислимые) нумерации 
семейства Сот (X, У). 

Распространим теперь введенные понятия на несколько 
более общий случай. Именно, дадим определения вычисли¬ 
мой нумерации для случая нумераций, не являющихся 
тотальными, а также определение главной нумерации для 
случая не обязательно тотальных нумераций не обязательно 
всего семейства Сот (X, У) (а лишь некоторого подмноже¬ 
ства). Эти определения будут таковы. 

Г-. Нумерация а семейства функций из X в К, основа¬ 
нием которой является подмножество Е'- некоторого ан¬ 
самбля Е, называется вычислимой, если Е 1 породимо н функ¬ 
ция т ЕхХ в У, ставящая в соответствие паре ( е, х) зна¬ 
чение функции с номером е на аргументе х в том случае, 
если е С Е', и не ставящая в соответствие ничего, если е$Е', 
является вычислимой. 

Для случая тотальных нумераций это определение, 
очевидно, совпадает с данным выше определением 1. Раз¬ 
ница между определениями 1 и 1' не очень существенна; 
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как легко видеть, всякая вычислимая нумерация эквива¬ 
лентна некоторой тотальной вычислимой нумерации (ср. 
сказанное выше о нумерациях с перечислимым основанием). 

2\ Вычислимая нумерация а некоторого семейства 
5 с:Сот ( X, 7) называется главной, или гёделевой, если 
всякая вычислимая нумерация этого семейства сводится 
к ней. 

В силу сказанного выше об эквивалентности всякой вы¬ 
числимой нумерации некоторой тотальной вычислимой ну¬ 
мерации, неважно, будем ли мы требовать сводимости к 
а всех вычислимых нумераций или только тотальных. По¬ 
этому определение 2 является частным случаем определе¬ 
ния 2'. Семейство 5 с Сот (X, 7) может обладать вычисли¬ 
мой нумерацией, но не обладать главной: таково, напри¬ 
мер, семейство всех примитивно-рекурсивных функций 
на N в N (см. [Ершов Ю., 1977, гл. 1, §2]). 

Все сказанное выше может быть перенесено на случай 
нумераций семейств породимых множеств (вместо вычис¬ 
лимых функций). Приведем соответствующие формулиров¬ 
ки. Пусть Ш и Е — некоторые ансамбли. Нумерация а 
некоторого подмножества 5 множества Оеп (17), основа¬ 
нием которой является подмножество Е'сЕ, называется 
вычислимой, если множество Е- и множество 

{<е, ѵиу\е^Е', ш6«(г)} 

породимы. Вычислимая нумерация а некоторого семейст¬ 
ва 5 с: Оеп (17) называется главной, или гёделевой, если вся¬ 
кая вычислимая нумерация этого семейства сводится к ней. 
Пусть теперь ансамбль Е нормирован. Тотальная вычис¬ 
лимая нумерация семейства Оеп (17), основанием которой 
служит Е, называется оптимальной, или шнорровой, или 
экономной по объему номеров, если всякая вычислимая ну¬ 
мерация этого семейства, основание которой является нор¬ 
мированным ансамблем, сводится к ней с помощью ограни- 
ченно-искажающего вычислимого отображения. 

Каждая вычислимая функция из X в 7 может рассмат¬ 
риваться как породимое подмножество Хх7. Поэтому ну¬ 
мерации семейств вычислимых функций могут рассматри¬ 
ваться также и как частный вид нумераций семейств по¬ 
родимых множеств и утверждение о вычислимости некото¬ 
рой нумерации некоторого семейства вычислимых функций 
может пониматься двояко: либо в соответствии с данным 
выше определением 1, либо как утверждение о вычисли¬ 
мости нумерации соответствующего семейства породимых 
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множеств. Легко проверить, что эти два понимания рав¬ 
носильны. Это замечание можно отнести к понятию глав¬ 
ной нумерации семейства вычислимых функций! здесь так¬ 
же возможны два понимания, и они также равносильны. 
(К шнорровым нумерациям сказанное не относится, так 
как, говоря о шнорровости нумерации, мы предполагаем, 
что она является нумерацией всего Сот (X, У) или всего 
Оеп (\У).) Сформулируем теперь упоминавшиеся в §1.14 
теоремы Роджерса и Шнорра. 

Теорема Роджерса. Для любых ансамблей X и V гёде- 
лева нумерация множества Сот (X, У) единственна с точ¬ 
ностью до изоморфизма, осуществляемого вычислимым 
взаимно однозначным соответствием между основаниями 
нумераций (см. [Роджерс, 1958], [Мальцев, 1963, теоре¬ 
ма 7.1], [Мальцев, 1965, §9, теорема 5]). 

Аналогичное утверждение верно для гёделевых нумера¬ 
ций множества Оеп (Щ при любом ансамбле Ц7, 

Теорема Шнорра. Для любых ансамблей Хи К шнорро- 
ва нумерация множества Сот (X, У) единственна с точ¬ 
ностью до изоморфизма, осуществляемого вычислимым 
взаимно однозначным ограниченно искажающим (в обе сто¬ 
роны) соответствием между основаниями нумераций (см. 
[Шнорр, 1972], [Шнорр, 1975]). 

Аналогичное утверждение верно и для шнорровых нуме¬ 
раций множества Оеп (№) при любом ансамбле №. 

Заметим, что и в определении гёделевой нумерации, и в 
определении шнорров'ой нумерации, так же как и в теоре¬ 
мах Роджерса и Шнорра, на сложность вычисления функ¬ 
ции, осуществляющей сведение нумераций, не накладыва¬ 
ется никаких ограничений. Одно из самых естественных тре¬ 
бований подобного рода состоит в принадлежности сводя¬ 
щей функции классу 5*. Приняв его, мы приходим к такому 
определению. 

4. Пусть а есть тотальная вычислимая нумерация се¬ 
мейства Сот (X, У), основанием которой служит словар¬ 
ный ансамбль. Нумерация а называется полиномиально 
главной (или полиномиально гёделевой — «роіупотіпаі ііте 
Обсіеі») согласно [Мачти, Винкльман, Янг, 1978], если вся¬ 
кая вычислимая нумерация семейства Сот (X, У), ос¬ 
нованием которой служит словарный ансамбль, сводится 
к ней с помощью функции из класса 9*. 

Это понятие впервые приведено в работе [Хартманне, 
Бейкер, 1975]. В этой же работе поставлена следующая 
проблема! имеет ли место аналог теорем Роджерса и Шнорра 

5 В. А. Успенский, А. Л. Семенов 
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для полиномиально главных нумераций. Более точно, вер¬ 
но ли, что полиномиально главная нумерация единственна 
с точностью до изоморфизма, осуществляемого о помощью 
вычислимого взаимно однозначного отображения, лежащего 
вместе с обратным к нему в классе 9 \ (Существование поли¬ 
номиально главной нумерации легко доказать.) Эта про¬ 
блема остается открытой. В [Мачти, Винкльман, Янг, 
1978, теорема 2.6 (а)] показано, что если 5*=оІ\Р5*, то ответ 
на поставленный вопрос — утвердительный. Другой час¬ 
тичный результат в этом направлении получен в [Хартманне, 
1982], где доказано, что все полиномиально главные нумера¬ 
ции, обладающие некоторыми дополнительными (на наш 
взгляд, мало естественными) свойствами, могут быть полу¬ 
чены одна из другой с помощью изоморфизма описанного 
выше типа. 

Сформулируем теперь две серии результатов, типичных 
для теории вычислимых нумераций. 

Результаты первой серии касаются существования и ко¬ 
личества (рассматриваемых с точностью до эквивалентнос- 
, ти) однозначных вычислимых нумераций того или иного 
семейства породимых множеств (в частности, вычислимых 
функций). Если семейство конечно, проблематика становит¬ 
ся тривиальной. Для бесконечного семейства всякая его 
однозначная вычислимая нумерация эквивалентна (и даже 
изоморфна) однозначной вычислимой натуральной нумера¬ 
ции; поэтому при изучении нумераций с точностью до экви¬ 
валентности безразлично, рассматривать ли все нумерации 
или только натуральные. 

Исследования в этой области начались со статьи Фридбер- 
га [Фридберг, 1958], в которой были построены однозначные 
вычислимые нумерации семейств Оеп {Щ и Сот ( X , У). 
(Такие нумерации, как нетрудно видеть, не могут быть 
главными.) Возник вопрос о числе однозначных вычислимых 
нумераций этих семейств (с точностью до эквивалентности). 

Сперва Пур-Эл установила, что для Сот ( X , У) это 
количество не менее двух (см. [Пур-Эл, 1964]). Затем Хуто- 
рецкий (см. [Хуторецкий, 1969]) обнаружил, что оно бес¬ 
конечно и для Оеп (И7), и для Сот (X, У). Оставался во¬ 
прос, каким это количество может быть вообще, т. е. для 
произвольных семейств породимых множеств и вычислимых 
функций. Известны были лишь примеры семейств, для ко¬ 
торых это количество равно бесконечности, единице (такой 
пример строится без труда) и нулю (пример семейства, для 
которого вычислимые нумерации существуют, но среди 
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них нет однозначных, можно найти, например, в [Ершов Ю., 
1977, гл. 1, §6]). В 1972 г. Марченков (см. [Марченков, 
1972]) показал, что для семейства всюду определенных 
(определенных на всем X) функций число попарно неэкви¬ 
валентных однозначных вычислимых нумераций может быть 
равно либо единице, либо бесконечности. Как установил 
Гончаров (см. [Гончаров, 1980], [Гончаров, 1980а]), сущест¬ 
вуют семейства породимых множеств и вычислимых функ¬ 
ций, для которых число неэквивалентных однозначных вы¬ 
числимых нумераций равно любому наперед заданному на¬ 
туральному числу. 

Вторая серия результатов связана с изучением алгеб¬ 
раического строения верхних полурешеток, которые обра¬ 
зованы отношением сводимости на классах эквивалентных 
вычислимых нумераций различных семейств породимых 
множеств. Приведем наиболее общие результаты о таких 
полурешетках. Всякая непустая полурешетка вычислимых 
нумераций либо одноэлементна, либо бесконечна (см. 
[Хуторецкий, 1971, следствие 1]); если полурешетка вы¬ 
числимых нумераций содержит более одного элемента, то 
она не.является решеткой ([Селиванов, 1976, теорема 1]). 

Главные нумерации, и только они, представляют собой 
наибольшие элементы полурешеток вычислимых нумера¬ 
ций, поэтому наибольших элементов может и не быть: как 
уже отмечалось, семейство всех примитивно рекурсивных 
функций не имеет главной нумерации (более того, как до¬ 
казано в [Марченков, 1972, теорема 3], полурешетка всех 
нумераций любого семейства общерекурсивных функций, 
содержащая более одного элемента, не имеет наибольшего 
элемента). 

Исследовались и минимальные элементы полурешеток. 
Исторически первыми примерами вычислимых нумераций, 
являющихся минимальными элементами соответствующих 
полурешеток, были однозначные вычислимые нумерации 
ряда семейств. Конструкции таких нумераций для основ¬ 
ных семейств, например для Оеп (№), оказались весьма 
нетривиальными (см. [Мальцев, 1965, п. 7.4]). В [Вьюгин, 
1973, следствие теоремы 1] построен пример семейства 
породимых множеств, полурешетка вычислимых нумераций 
которого непуста, но не имеет минимальных элементов. 
В [Ершов Ю., Лавров, 1973, замечание 1] найдены алгебраи¬ 
ческие инварианты, позволившие доказать неизоморфность 
полурешеток вычислимых нумераций для ряда естественных 
семейств: так, этим методом доказано, что попарно неизо- 
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морфны полурешетки вычислимых нумераций семейств 

{0, {0}}, {0, {0}, {0, 1}}. {0, {0}.{О, 1, .... П}}, ... 

С другой стороны, в [Денисов, 1978, следствие 3] доказано, 
что полурешетки вычислимых нумераций семейств {0, {0}, 
..., (п}}и { 0 , {0}, {т}}изоморфны для любых т, п^,Ы. 

1.15.2. Нумерованные множества. Множество, рассмат¬ 
риваемое вместе с какой-либо своей нумерацией, называется 
занумерованным, как в [Успенский, 1955а], [Успенский, 
1960], или нумерованным, как в [Мальцев, 1961], [Мальцев, 
1965], множеством; если нумерация натуральная, множест¬ 
во называется натурально (за)нумерованным. 

Наличие у множества М нумерации позволяет говорить 
о вычислимости функций из М н в М и о разрешимости под¬ 
множеств М ! (относительно данной нумерации). Именно, 
функцию /: М к -*М естественно называть вычислимой отно¬ 
сительно нумерации ѵ, если существует такая вычислимая 
функция ф, что 

ѵ (ф (^ і, .... е 6 ))~/(ѵ(е,) . ѵ(е*)) 

для любых ей ..., е к ^Е, где Е — основание нумерации ѵ. 
Разрешимость РаМ* означает существование такой вы¬ 
числимой функции х> что для всех е*, ..., е $ €.Е 

<ѵ(е х ) . ѵ(е 5 )>^=)-х(«і. = 

<ѵ(^і), .... ѵ(е,)>$Р=>х(*і, ..., е,) = 1. 

Натурально нумерованные множества образуют естест¬ 
венную категорию, в которой они выступают в роли объек¬ 
тов. Морфизмом из натурально нумерованного множества 
Мі (с нумерацией а г ) в натурально нумерованное множество 
М 2 (с нумерацией а 2 ) называется отображение р: М 1 ->М 2 , 
для которого существует всюду определенная на N вы¬ 
числимая функция / такая, что раі=а 2 /\ Ряд известных 
свойств нумерованных множеств удается сформулировать в 
теоретико-категорных терминах (см. [Ершов Ю., 1977, гл. 2]). 

Можно рассматривать и категорию, образованную всеми 
нумерованными, а не только натурально нумерованными 
множествами. При таком подходе морфизмами нужно, по- 
видимому, считать те отображения р нумерованного множе¬ 
ства Мі с нумерацией а* в нумерованное множество М 2 с 
нумерацией а 2 , для которых существует такая вычислимая 
функция ^ для которой при всех х, принадлежащих осно¬ 
ванию нумерации щ, во-первых, определены значения 
}(х) и <х 2 (/(%)) и, во-вторых, выполнено равенство « 2 (Дх)) = 
=р(ссі(х)). Возникающая категория в литературе не изу- 
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чалась, хотя, по мнению авторов, ее изучение не менее ес¬ 
тественно, чем изучение категории натурально нумерован¬ 
ных множеств. 

1.15.3. Операции над нумерованными множествами. Су¬ 
ществуют некоторые естественные операции, позволяющие 
получать из одних нумерованных множеств другие. К их 
числу относятся операции прямого произведения, сужения, 
кортежного распространения и факторизации, используе¬ 
мые в п. 2.5.1. Только что перечисленные четыре операции 
достаточно очевидны, вот их формальные определения. 
Пусть а и Р суть нумерации множеств А и В с основаниями 
Е и Р. Тогда: 

1) прямым произведением нумераций а и Р называется 
нумерация у множества АхВ, имеющая основание ЕхР 
и задаваемая формулой 

у(е, [) = <а (е), Р(/)>; 

2) нумерация р называется кортежным распространени¬ 
ем нумерации а, если В=А°°, Р=Е°° и Р(<еі, ..., е„» = 
=< а (бі), .... а(е„)>; здесь Л“, Е°° суть соответственно 
множества всевозможных кортежей над А и над Е; 

3) нумерация р называется сужением нумерации а, если 
В с: А, Р=а ~ 1 (В) и р есть сужение а на Р\ 

4) нумерация Р называется фактор-нумерацией нумера¬ 
ции а, если существует отображение /; А-+В с областью 
определения А и областью значений В, для которого р = 
=[оа. 

§ 1.16. Начало создания инвариантной, 

или машинно-независимой, теории сложности 

вычисления 

Под инвариантной теорией сложности понимается та¬ 
кая, результаты которой формулируются независимо от 
выбора той или иной вычислительной (или порождающей) 
модели. Здесь возможны три пути. 

Первый — поиск таких широко понимаемых оценок 
сложности, которые не зависят от выбора вычислительной 
модели. В § 1.7 уже шла речь о том, что при определении 
класса РА можно (без изменения класса) рассматривать 
разные вычислительные модели. По существу, при опреде¬ 
лении класса РА мы используем не одну верхнюю оценку, 
а класс верхних оценок, отличающихся друг от друга пре¬ 
образованиями некоторого семейства. 
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Более точно, рассмотрение оценок сложности с точно¬ 
стью до преобразования из данного семейства преобразо¬ 
ваний означает следующее. Сложностный класс задается не¬ 
которой системой оценок, причем для любых двух оценок 
а, р из рассматриваемой системы существуют такие преоб¬ 
разования ІІ, V из фиксированного множества, что а^{/о|3 
и р*$:Ѵоа (так, все невырожденные полиномы получаются 
один из другого возведением в ограниченную и отделенную 
от нуля степень). Функция считается принадлежащей к 
данному сложностному классу, если сложность ее вычисле¬ 
ния может быть ограничена какой-нибудь оценкой из рас¬ 
сматриваемой системы. В соответствии со сказанным выше, 
5* можно определить как класс функций, время вычисления 
которых линейно ограничено с точностью до возведения в 
ограниченную и отделенную от нуля степень. 

Второй путь — попытаться какие-то параметры пред¬ 
ставителя вычислительной модели включить в качестве ар¬ 
гументов в сложностную функцию. Четкая и содержатель¬ 
ная формализация этих параметров представляет значи¬ 
тельные трудности, до сих пор в качестве таких парамет¬ 
ров рассматривалось число лент и мощность алфавита мно¬ 
голенточных машин Тьюринга (см., например, [Сейферас, 
1977]). 

Третий путь — аксиоматический. Блюм в [Блюм, 1967] 
предложил две аксиомы, которым удовлетворяет любая ра¬ 
зумная сложность вычисления; в этих аксиомах понятие 
сложности вычисления формализовано в виде понятия меры 
сложности. 

Для фиксированной главной (для X, У с индексным 
множеством Е) функции V : ЕхХ-^У мерой сложности 
называется вычислимая функция С\ Е удов¬ 

летворяющая следующим двум аксиомам Блюма (см. 
[Блірм, 1967]); 

1) Ѵ(і,х) определено 4Ф С (і, х) определено; 

2) множество {((, х, у)\С(і, х)=у) разрешимо. 

Примерами мер сложности являются время и емкость 

вычислений на машинах Тьюринга, описанные в §1.6, 
так же как и многие другие варианты понятий времени и 
емкости. В [Блюм, 1967] доказаны две замечательные теоре¬ 
мы о мерах сложности. Приведем их формулировки. 

Теорема о рекурсивной связи различных мер сложности. 
Пусть Сі, С а— две меры сложности (для одной и той же 
главной функции). Тогда существует такая вычислима^ 
функция І) : X х N->^1 с областью определения X X N. что 
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для всех / неравенство С 2 (і, х)^Т)(х, С*(і, х)) выполне¬ 
но для всех х, для которых V (І, х) определено, кроме 
конечного их числа. 

Теорема об ускорении. Пусть С — мера сложности и 
пусть Я — всюду определенная вычислимая функция из N 
в N. Тогда существует такое разрешимое подмножество А 
множества X (характеристическая функция которого обоз¬ 
начается далее через % А ), что для любого і € Е, для которого 
Ѵ(і, х)=% л (х) при всех х, существует такое /, что ѴЦ, х) = 
—%а( х ) п Р и всех х > и Д ля всех х, кроме конечного числа, 
имеет место неравенство С(і, х)^Я (С(/, х)). 

Теорию Блюма можно рассматривать как «дескриптив¬ 
ную часть» метрической теории алгоритмов. Действитель¬ 
но, понятия и методы подхода Блюма очень близки к клас¬ 
сической дескриптивной теории алгоритмов. 

Конечно, чрезвычайная общность аксиом Блюма влечет 
определенные неудобства: чем шире класс мер сложности, 
удовлетворяющих этим аксиомам, тем меньше можно о нем 
сказать. - Приведем пример одного из возможных дополни¬ 
тельных требований, предъявляемых к мерам сложности. 
Кажется естественным рассматривать в качестве сложностей 
только такие функции, сложность вычисления которых не¬ 
велика, например не превосходит значения самой слож- 
ностной функции. Можно (при добавить третью 

аксиому к аксиоматике сложности: 

ѴіЗ/Ѵх (С ( і , х) ~ V (}, х) &Ѵ (/, х) (/, х)). 

Такие сложности, как время и емкость для многоленточ¬ 
ных машин Тьюринга, удовлетворяют этой аксиоме (и даже 
ее эффективному варианту, в котором / алгоритмически 
находится по О- В [Хартманне, Хопкроі|ц, 1971, §4] мера 
сложности называется удобной (ргорег), если она удовлет¬ 
воряет «эффективному» варианту третьей аксиомы. 


§ 1.17. Теория сложности 
и энтропии конструктивных объектов 

Общий подход к понятию сложности конструктивного 
объекта как минимального объема описывающей этот объект 
программы принадлежит Колмогорову (см. [Колмогоров, 
1965]). (Независимо, хотя и в менее ясном виде, аналогич¬ 
ные идеи были высказаны Соломоновым в [Соломонов, 



136 


ЧАСТЬ ПЕРВАЯ ОСНОВНЫЕ ОТКРЫТИЯ 


1964].) В ходе развития этого подхода выяснилось, что раз¬ 
личным интуитивным представлениям о сложности соот¬ 
ветствуют различные точные определения. 

На интуитивном уровне указанные различия возникают 
по следующим причинам. Любой конструктивный объект 
(например, слово) можно рассматривать как сообщение о 
нем самом, а можно рассматривать как сообщение одновре¬ 
менно обо всех объектах, в каком-то смысле его содер¬ 
жащих (например, обо всех продолжениях слова). При вто¬ 
ром подходе естественно считать, что программа, описываю¬ 
щая объект, может задавать не обязательно в точности его, а 
лишь какое-то его продолжение. 

Аналогичные соображения относительно соотношения 
часть — целое имеют место и для самих описаний объектов. 
В частности, если описание и некоторая его часть задают 
какие-то объекты, то, при некоторой точке зрения, эти объек¬ 
ты не могут противоречить друг другу, они должны быть 
согласованы. Таким образом, на рассматриваемом ансамбле 
должно быть задано отношение «согласованности». При¬ 
мер отношения согласованности: «один из двух объектов — 
часть другого». Естественно предполагать, что отношение 
согласованности разрешимо. 

В свете сказанного, в данном пункте термином « ансамбль » 
обозначается произвольный ансамбль, рассматриваемый 
вместе с заданным на нем произвольным разрешимым би¬ 
нарным отношением, называемым отношением согласован¬ 
ности. Пусть X и У — ансамбли. Рассмотрим следующее 
условие, налагаемое на отношение Я между элементами ан¬ 
самблей X и V: (х и х' согласованы) &Я(х, у)&Я(х', у')=> 
=^{у и у' согласованы). Произвольное перечислимое отноше¬ 
ние Я между ансамблями X и У, удовлетворяющее этому ус¬ 
ловию, называется способом описания (элементов из V 
посредством элементов из X). Объект х называется описа¬ 
нием объекта у при способе Я, если имеет место Я(х, у). 

В дальнейшем центральную роль будут играть ансамбли 
N и Е —■ ансамбли описаний. Здесь через N обозначен 
ансамбль натуральных чисел с отношением равенства в 
качестве отношения согласованности, а через 3 — ансамбль 
всех слов в алфавите {0, 1} со следующим отношением со¬ 
гласованности: слова согласованы, если одно из них — на¬ 
чало другого. На этих ансамблях заданы нормы: в 3 нор¬ 
мой слова считаем его длину, в N нормой числа х считаем 
целую часть числа 1о§ 2 (дН-1) (эти нормы мы рассматривали 
в§ 1.6). Чтобы подчеркнуть, что мы рассматриваем не про- 
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извольные нормы на 5 и N. а некоторые конкретные, мы 
будем называть эти нормы объемами и обозначать буквой /. 

Итак, пусть X — это один из ансамблей N или В, пусть 
У — произвольный ансамбль и пусть Я — какой-либо спо¬ 
соб описания. Сложностью К к (у) объекта у при способе 
описания Я называется наименьший объем описания этого 
объекта (если описания не существует, то сложность рав¬ 
на оо). Пусть, например, К=3, а Я состоит из всех 

пар вида {х, у), где х — программа какого-то нормального 
алгорифма 31 і N->{0* 1}, а у — начальный отрезок после¬ 
довательности 31 (0), 31 (1), 31(2), . . тогда /<# — это вве¬ 
денная Марковым (см. [Марков, 1964], [Марков, 1967]) слож¬ 
ность разрешения. 

Как установил Колмогоров в [Колмогоров, 1965], среди 
всех способов описания Я (при фиксированных X и У, у 
Колмогорова Х=К=№) имеется оптимальный Яо, т. е. 
такой, что для всякого способа Я выполнено ^ Кн- 
Для данных ансамблей X, У сложность объекта у при про¬ 
извольном фиксированном оптимальном способе описания 
называется энтропией К{у) этого объекта; для того чтобы 
явно указать ансамбли Хи У, говорят об X — У -энтропии. 
Таким образом, X —К-энтропия есть отображение множе¬ 
ства У в NII {оо }. Конечно, для данных X, У существует 
много X —К-энтропий. Однако все эти функции асимптоти¬ 
чески эквивалентны! это значит, что для любых двух X — У- 
энтропий К' и /С"выполнено (асимптотическое) неравенство 
\К’(у)—К" (у)\ -- 0. С точностью до этой эквивалентности 
X —К-энтропия единственна. Фактически само понятие эн¬ 
тропии определено с точностью до этой эквивалентности. 

Основная лемма (почти очевидная). Для любой вычисли¬ 
мой функции / из N в N верно, что (М—^-энтропия }(п)) ~ 
-р (М—[^-энтропия п). В общем случае пусть і/, V — про¬ 
извольные ансамбли, Е — способ описания элементов V 
посредством элементов \]\ тогда неравенство ( X —К-эн- 
тропия ѵ ) {X— ^/-энтропия и) имеет место для любых и, ѵ, 

для которых выполнено Е (и, ѵ). 

Наиболее изучен случай, когда не только X, но и К 
выбирается из числа ансамблей М, 2. При комбинации 
двух возможностей для X с двумя возможностями для У 
получаются четыре энтропии: N — іѴ-энтропия, или про¬ 
стая колмогоровская энтропия (см. [Колмогоров, 1965]), 
N—3-энтропия, или энтропия разрешения (см. [Звонкин, 
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Левин, 1970]), Е—Е-энтропия, или монотонная энтропия 
(см. [Левин, 1973]), Е— ІЧ-энтропия, или префиксная эн¬ 
тропия (см. [Левин, 1976]). 

Между этими энтропиями имеет место ряд соотношений. 
Для удобства их формулирования укажем в явном виде один 
ограниченно-искажающий изоморфизм между нормиро- 
ванными ансамблями (М, I) и (Е, I). Изоморфизм этот та¬ 
ков: нуль <-» пустое слово, один 0, два 1, три 00, 
. . .; другими словами, числу х соответствует слово, полу¬ 
чаемое из двоичной записи х+1 отбрасыванием начальной 
единицы. Соотношения между энтропиями мы представим 
в виде таблицы. Все рассматриваемые энтропии суть отоб¬ 
ражения в М, их областями определения являются N или 
8, однако, пользуясь построенным только что изоморфиз¬ 
мом, мы будем рассматривать все энтропии как отображе¬ 
ния Е-И^І. Название энтропии пишем перед К • Для любых 
двух функций / и § функция / стоит в таблице левее § 
тогда и только тогда, когда выполнено і —• д. 


ІЧВ/С 

мч/с 

в в/с 

в М/С 

1 

1,5 І0{*2 1 


Как нетрудно проверить, все четыре указанные в таблице 
энтропии отличаются друг от друга не более чем на с 1о§ 2 I (*)> 
где с — некоторая константа; эта оценка не может быть су¬ 
щественно улучшена: существует бесконечно много слов х, 
для которых ММ/((х)— Е,ЕК(х)^Сі 1о§ 2 /(*), а также бе¬ 
сконечно много слов у, для которых ЕЕ К. (у) —Ш/((у) ^ 
^ Сі 1о§ 2 1(у)> где Сі —некоторая положительная константа. 

В качестве примера других свойств энтропий укажем 
на монотонность монотонной энтропии; если слово х яв¬ 
ляется началом слова у, то 8ЕЯ(л:)^ЕЕ/((у). 

Одним из применений понятия энтропии является воз¬ 
можность «энтропийной» характеризации таких понятий- 
антиподов, как вычислимость и случайность. Интуитивно 
вычислимая последовательность задается некоторым зако¬ 
ном, т. е. сложность ее начальных отрезков ограничена. Если 
теперь эту интуитивную сложность понимать как монотон¬ 
ную энтропию, приведенные соображения переходят в сле¬ 
дующую теорему. 

Теорема. Последовательность вычислима ФФ монотонная 
энтропия ее начальных отрезков ограничена Ф» энтропия 
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разрешения ее начальных отрезков ограничена (см. [Звон- 
кин, Левин, 1970, теорема 2.2]). 

Интуитивно, случайная последовательность не обладает 
никакими закономерностями — сложность ее начальных от¬ 
резков максимальна. Понимая по-прежнему сложность как 
монотонную энтропию, можно рассматривать предыдущую 
фразу как определение случайности (см. об этом §2.6). 

Было бы очень интересно ввести понятие энтропии с ог¬ 
раничениями на сложность вычислений — понятие, наме¬ 
ченное Колмогоровым в [Колмогоров, 1965]; некоторые по¬ 
пытки такого рода имеются в [Шнорр, 1977]. 

Наряду с энтропией конструктивного объекта рассма¬ 
тривается условная энтропия одного объекта относительно 
другого. Для ее определения к ансамблям X и У добав¬ 
ляется еще один ансамбль — ансамбль условий А. Факти¬ 
чески условная энтропия изучалась только при Х—У—А— 
(см. [Колмогоров, 1965]). В этом случае способ ус¬ 
ловного описания К определяется как произвольное пере¬ 
числимое отношение на X X У X А , удовлетворяющее условию 
К(х, у, а)&К(х, у', а)=>у=у'. Если К есть способ ус¬ 
ловного описания, можно ввести следующее понятие и 
обозначение —условную сложность К я (у\а) объекта у от¬ 
носительно объекта а при способе описания К. 

По определению, Кц(у\а) есть минимальный из объемов 
тех х, для которых выполнено К(х, у, а). Среди всех спо¬ 
собов условного описания имеется оптимальный, т. е. та¬ 
кой способ Ко, что для всякого способа К выполнено Кн а -р 

Кц- В частности, оптимальным является любой способ 
Ко, полученный соотношением Ко(х, у, а)е>Ѵ (х, а)—у, где 
V — некоторая оптимальная гёделева функция для ансамб¬ 
лей А, У с индексным множеством X (см. § 1.14). Условная 
сложность при оптимальном способе описания называется 
условной энтропией и обозначается К(у\а). Если в услов¬ 
ной энтропии К(у\а) произвольным образом фиксировать 
а, то получится простая колмогоровская энтропия, при¬ 
чем все простые колмогоровские энтропии могут быть по¬ 
лучены из условных энтропий таким способом. Именно так 
и была введена Колмогоровым его простая энтропия в [Кол¬ 
могоров, 1965]. 

Уже имея в распоряжении понятие энтропии, можно с 
новой точки зрения посмотреть на свойство экономности 
(по норме; см. § 1.14). Естественно теперь понимать требова¬ 
ние «р не содержит ничего лишнего по сравнению с і» так: 
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(простая колмогоровская) энтропия р может превосходить 
энтропию і не более чем на константу, не зависящую от і. 
Оказывается, что при таком понимании всякая главная 
универсальная функция является экономной (теперь уже не 
по норме, а по энтропии). Получаем следующее свойство, 
которым обладает любая главная универсальная функция 
Ѵі ЕХХ-^Ѵ ; 

(ЭЭ) для каждого ансамбля I и каждого алгоритма Л; 
ІХХ-+У существует такой алгоритм й: І-+Е с областью, 
определения /, что Щ ((і, х>)^К(й(0( х) и (й (і)) -р 
^N//((0; 3 Д есь П Р И определении энтропии мы считаем, 
что отношение согласованности на Е и / совпадает, с отно¬ 
шением равенства. 

В частности, для любой известной вычислительной мо¬ 
дели и любого известного способа программирования ре¬ 
зультатная функция является экономной по энтропии про¬ 
грамм, т. е. обладает свойством (ЭЭ) с программным ансамб¬ 
лем в качестве Е. 

Введение понятия энтропии слова позволяет по-новому 
взглянуть и на вопрос о сложности распознавания множеств. 
Всякая сложность, в том числе время вычисления, есть 
функция аргумента алгоритма. Можно считать, что один 
алгоритм работает дольше другого, если для временных 
функций выполняется соответствующее неравенство в каж¬ 
дой точке. При таком подходе, однако, может оказаться, 
что алгоритмы, предназначенные для распознавания двух 
таких множёств слов, которые получаются друг из друга 
переименованием букв, имеют несравнимые сложности. 

В то же время ясно, что эти алгоритмы, по существу, 
представляют собой один и тот же алгоритм. Чтобы рас¬ 
ширить отношение равной сложности вычисления и на та¬ 
кие алгоритмы, слова группируют в классы по их длинам и 
строят новую сложностную функцию, переходя к максиму¬ 
му в каждом классе. Однако и это не решает проблему. 
Скажем, если ко всем словам некоторого множества двоич¬ 
ных слов приписать в конце 100 нулей или каждую букву 
в слове повторить дважды, может получиться множество, 
распознаваемое проще исходного. Можно, однако, посту¬ 
пить иначе: отнести к одному классу не все слова данной 
длины, а все слова данной энтропии с каким-либо фикси¬ 
рованным ограничением на сложность вычислений (ска¬ 
жем, рассматривать вычисления в реальное время). Это 
приведет к тому, что сложностные функции для множеств 
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интуитивно 'одинаковой сложности окажутся близки¬ 
ми. 

Как уже говорилось, рассмотренное понятие энтропии 
определено с точностью до асимптотической эквивалентно¬ 
сти. Если же мы хотим говорить об энтропии индивидуаль¬ 
ного конструктивного объекта как о конкретном числе, не 
удовлетворяясь утверждениями, делаемыми «с точностью 
до ограниченного слагаемого», то нам придется среди опти¬ 
мальных способов описания выбрать какой-то один и про¬ 
возгласить его «единственно правильным». Каков же дол¬ 
жен быть этот «единственно правильный» способ К? Прежде 
всего, он должен казаться нам «естественным»; хочется, кро¬ 
ме того, чтобы для любого другого столь же «естественного» 
способа описания О неравенство Кр^Ко+С, вытекающее 
из определения оптимальности, выполнялось с как можно 
меньшей константой С. В заметке [Левин, 1977] предлагает¬ 
ся некоторый конкретный способ описания, причем декла¬ 
рируется его естественность и выражается уверенность в 
том, что для других естественных способов описания упо¬ 
мянутая константа не превосходит нескольких сотен. Из¬ 
лишне говорить, разумеется, что такого рода убежденности 
суждено пока оставаться субъективным ощущением, по¬ 
скольку никакими средствами уточнения понятия естест¬ 
венного способа описания мы не располагаем. 

§ 1.18. Удобные вычислительные модели 

Сейчас мы дадим единообразное описание некоторого 
класса вычислительных моделей. Для этого начнем с при¬ 
мера — многоленточных машин Тьюринга о входной и 
выходной лентами. 

Непосредственное наблюдение показывает, что такая 
машина имеет управляющее устройство (процессор), кото¬ 
рое может находиться в том или ином состоянии из конеч¬ 
ного множества состояний, оно взаимодействует с инфор¬ 
мационными устройствами — входной, выходной и рабочей 
лентами. Взаимодействие происходит посредством отдачи 
приказаний и получения ответных сигналов. Набор при¬ 
казаний для входной ленты таков: «Налево!», «Направо!»; 
для рабочей ленты — вдобавок к этим двум — «Печатай а!» 
(для всех а из алфавита ленты); для выходной ленты — «Пе¬ 
чатай а и направо!» Сигналы от входной и рабочей лент 
таковы: «Вижу а» (для всех букв соответствующего алфа¬ 
вита); от выходной ленты сигналов не поступает. 
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Эта картина может быть обобщена и на другие типы вы¬ 
числительных моделей. В частности, видно, что характер 
различных информационных устройств может быть совер¬ 
шенно различным. Скажем, входное устройство может быть 
лентой, а рабочая память (состояние рабочего устройства) — 
колмогоровским комплексом. Описанная схема наглядно 
отражает и выделение различных устройств в реальных 
ЭВМ. В эту схему можно внести (мы так и сделаем) и еще 
одну особенность реальных ЭВМ — наличие программы, 
подаваемой извне. Для этого нужно лишь добавить еще од¬ 
но информационное устройство, аналогичное входному,— 
программное. 

Более формально, аналогично тому, как это сделано в 
[Пауль, Сейферас, Симон, 1980], информационное устрой¬ 
ство можно определить как набор, состоящий из множества 
состояний — подмножества некоторого ансамбля, алфави¬ 
та приказаний, алфавита сигналов и функции преобразова¬ 
ния информации, относящей всякой паре (приказание, сос¬ 
тояние) пару (новое состояние, сигнал). Теперь, определив 
управляющее устройство как конечный автомат с подхо¬ 
дящим входным и выходным алфавитами, можно опреде¬ 
лить вычислительную модель, все представители которой 
различаются лишь управляющими устройствами, а вход¬ 
ное, выходное, рабочее и программное устройства у них 
одинаковы. Для полного описания вычислительной модели 
нужно задать еще начальные состояния выходного и рабо¬ 
чего устройства, входную и выходную процедуры. Один 
алгоритм вычисления на данной модели определяется фик-' 
сацией управляющего устройства и (начального) состоя¬ 
ния программного устройства. 

Таким образом, одну вычислительную модель образуют, 
например, все машины Тьюринга, у которых имеется вход¬ 
ная лента о алфавитом (0, 1}, программная лента с алфави¬ 
том {а, Ь, с, й, е, (, #}. две рабочих с алфавитом {а, Ь, 1}, 
еще одна рабочая «плоская» лента с алфавитом {/, е, т} и 
выходная лента с алфавитом {0, 1}. В то же время если не 
фиксировать, скажем, алфавит рабочей ленты для машин 
Тьюринга с одной рабочей лентой, то единой вычислитель¬ 
ной модели из рассматриваемого класса не получится. 
(Ранее мы понимали термин «вычислительная модель» ина¬ 
че, разрешая и такие модели.) 

Время вычисления для всякого устройства описанного 
типа можно определить как число шагов вычисления. Ем¬ 
кость вычисления определим как максимальный объем ра- 
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бочей памяти, при условии, что на состояниях этой памяти 
введен объем. В аналогичной ситуации можно определить 
и объем программы. 

Конечно, получающаяся модель не обязана быть пред¬ 
ставительной. Легко, например, построить модель в опи¬ 
санном сейчас смысле, состоящую из всех автоматов с мага¬ 
зинной памятью. 

Всякой вычислительной модели рассматриваемого нами 
класса естественно соответствует порождающая модель, по¬ 
лучающаяся переходом к недетерминированным управляю¬ 
щим устройствам.' 

Назовем вычислительную модель описываемого в этом 
параграфе типа (со входным, выходным, программным и ра¬ 
бочим устройствами) удобной, если на ансамбле, из которо¬ 
го берутся программы, задана норма и существует такое 
управляющее устройство (этой модели) А, что по всякому 
другому управляющему устройству В той же модели можно 
указать такую ограниченно-искажающую функцию к (тран¬ 
слятор), что: 

а) результат применения А к к(р) и х равен результату 
применения Вкрих или оба этих результата не определены; 

б) время вычисления А на аргументах Н(р) и х не пре¬ 
восходит времени вычисления В на р и х, умноженного на 
константу, не зависящую от р, х; 

в) емкость вычисления А на аргументах Н(р) и х не 
превосходит емкости вычисления В на р и х плюс кон¬ 
станта, не зависящая от р, х. 

Свойство в), разумеется, предполагает, что определено 
понятие объема для состояний рабочего устройства. 

Удобной вычислительной моделью оказываются много¬ 
ленточные машины Тьюринга с фиксированным числом ра¬ 
бочих лент с фиксированными алфавитами (где нормой на 
словах служит норма, описанная в § 1.6,— длина, умножен¬ 
ная на логарифм числа букв алфавита), а также модель, 
получающаяся, если выбрать в качестве рабочего устрой¬ 
ство, состояниями которого являются (Б, ^-комплексы или 
колмогоровские Б-комплексы над фиксированным алфави¬ 
том — при условии, что выбранная для измерения объема 
рабочей памяти норма на комплексах удовлетворяет тре¬ 
бованиям (Д1) и (Д2) из § 1.6. В качестве входного и выход¬ 
ного устройств при этом можно брать ленты или устройства, 
работающие с комплексами (над фиксированными алфави¬ 
тами). 



ЧАСТЬ II 

ОСНОВНЫЕ МАТЕМАТИЧЕСКИЕ ПРИЛОЖЕНИЯ 

ТЕОРИИ АЛГОРИТМОВ 

В § 1.1 упоминались алгоритмы, изобретенные задолго 
до появления общего понятия алгоритма. Однако именно с 
появлением этого общего понятия связано возникновение 
теории алгоритмов. Действительно, чтобы постичь эту те¬ 
орию, недостаточно уметь обращаться с конкретными при¬ 
мерами алгоритмов; необходимо воспринять общее понятие 
алгоритма. 

Огромное число теорем, предполагающих построение тех 
или иных алгоритмов и встречающихся в различных обла¬ 
стях математики, не требует для своего понимания общего 
понятия алгоритма. Поэтому эти теоремы не будут рассма¬ 
триваться как принадлежащие приложениям теории алго¬ 
ритмов. Построение конкретного алгоритма мы относим к 
той области математики или вычислительной практики, к 
которой принадлежит решаемая этим алгоритмом задача и 
методы которой используются при построении алгоритма 
(впрочем, в отдельных случаях этой областью может ока¬ 
заться и сама теория алгоритмов). В противоположность 
этому теорема о несуществовании алгоритма обращается к 
идее всего класса алгоритмов в целом и, следовательно, 
является теоремой теории алгоритмов. 

Подобным же образом мы не рассматриваем в качестве 
приложений теории алгоритмов оценки сложности конкрет¬ 
ных алгоритмов, если только они не были получены для 
представительной вычислительной модели. Так," в этой ча¬ 
сти не будут рассматриваться теоремы об алгебраической 
сложности (заметим, что некоторые их следствия — на¬ 
пример, некоторые теоремы о сложности вычисления на 
машинах Тьюринга — могут и принадлежать к приложе¬ 
ниям теории алгоритмов). 

Мы рассматриваем здесь только математические при¬ 
ложения теории алгоритмов, оставляя в стороне ее приложе- 
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ния, скажем, к биологии (такие, как описание рефлексов в 
терминах относительных алгоритмов, трактовку генетиче¬ 
ского кода как программы, понимание макроэволюции как 
порождающего процесса — относительно этой последней 
темы см. [Маслов, 1978]), к психологии (см. [Маслов, 
1979а]), к теории управления (при том, что ведущие специа¬ 
листы в области этой теории проявляют все возрастающий 
интерес к весьма отвлеченным на первый взгляд концепциям 
теории алгоритмов — см. [Петров, Уланов, Ульянов, 19791), 
к языковедению (см. [Гладкий, 1977а], [Гладкий, 1982], 
[Манин, 1981]). 

Основные математические приложения теории алгорит¬ 
мов, которых мы здесь касаемся, таковы. 

1. Исследование массовых проблем. 

2. Приложения к основаниям математики: конструктив¬ 
ная семантика. 

3. Приложения к математической логике: анализ фор¬ 
мализованных языков логики и арифметики. 

4. Вычислимый анализ. 

5. Нумерованные структуры. 

6. Приложения к теории вероятностей: определения 
случайной последовательности. 

7. Приложения к теории информации: алгоритмический 
подход к понятию количества информации. 

8. Оценки сложностей решения отдельных задач. 

9. Влияние теории алгоритмов на алгоритмическую 
практику. 

Соответственно этому перечню часть II состоит из 9 пара¬ 
графов. 

Имеются, впрочем, приложения, не подпадающие под 
указанную рубрикацию. С одного такого примера мы и нач¬ 
нем. В § 1.9 был отмечен следующий результат общей тео¬ 
рии алгоритмов: произвольное перечислимое множество 
натуральных чисел представимо в виде множества всех на¬ 
туральных значений подходящего многочлена. Частные 
случаи этого утверждения (для конкретных перечислимых 
множеств) могут рассматриваться как факты теории чисел, 
и некоторые из них оказались неожиданными для специали¬ 
стов в этой области математики. Среди таких частных слу¬ 
чаев — существование многочлена с целыми коэффициента¬ 
ми, множество натуральных значений которого (при нату¬ 
ральных значениях переменных) совпадает со множеством 
всех простых чисел. Один такой многочлен приведен в 
[Дейвис, Матиясевич, Робинсон, 1976], и его запись зани- 
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мает лишь несколько строк 1 ). В той же работе отмечается, 
что многие классические проблемы теории чисел, такие как 
проблема Ферма, проблема Гольдбаха и гипотеза Римана, 
могут быть переформулированы как проблемы существова¬ 
ния решения подходящего диофантова уравнения. 

§2.1. Исследование массовых проблем 

2.1.0. Основные понятия. Алгоритмическая проблема — 
это проблема построения алгоритма с заданными свойства¬ 
ми (например, алгоритма, перечисляющего данное множе¬ 
ство, или алгоритма с данной оценкой сложности, решаю¬ 
щего данную задачу). Частным случаем алгоритмических 
проблем являются алгоритмические массовые проблемы (та¬ 
ковыми не являются оба только что приведенных примера). 
(Алгоритмические массовые проблемы иногда называются 
просто «алгоритмические проблемы», как, например, в 
[Адян, 1977], или просто «массовые проблемы», как, напри¬ 
мер, в [Адян, 1982]). Понятие алгоритмической массовой 
проблемы возникло на основе рассмотрения массовых проб¬ 
лем. Массовые проблемы образуют основное поле приложе¬ 
ния теории алгоритмов; более того, именно они и вызвали 
к жизни само понятие алгоритма. 

Единичная проблема состоит в требовании предъявить 
объект, удовлетворяющий определенным условиям и называе¬ 
мый решением проблемы; решить проблему — значит ука¬ 
зать такой объект; если решение существует, т. е. если про¬ 
блему можно решить, проблема называется решимой (чи¬ 
татель заметит, что мы употребляем словосочетание «ре- 
шимая проблема» вместо более традиционного, но менее точ¬ 
ного словосочетания «разрешимая проблема»). 

Массовая проблема представляет собой серию (как пра¬ 
вило, бесконечную) единичных проблем и состоит в требова¬ 
нии решить все эти проблемы; понимание того, что же имен¬ 
но считается решением массовой проблемы, нуждается, ра¬ 
зумеется, в уточнении. Пример единичной проблемы: для 
уравнения х ъ —х —1=0 найти рациональное приближение к 


9 Как указано в [Степанов, 1984], возможен многочлен с целыми 
коэффициентами, имеющий степень 25, зависящий от 26 переменных, 
требующий для своей записи лишь 325 символов и обладающий следую¬ 
щим свойством: множество всех простых чисел совпадает с множеством 
положительных значений этого многочлена, принимаемых в целых 
точках.^ 
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его отрицательному корню с точностью 10 -в . Пример мас¬ 
совой проблемы: в той же ситуации для любого п найти ра¬ 
циональное приближение с точностью 10"”. 

Другой пример единичной проблемы — проблема разре¬ 
шения для множества Л, расположенного в некотором ан¬ 
самбле 1Е; проблема состоит в требовании указать разрешаю¬ 
щий алгоритм для А; существование решения («решаемость», 
«решимость») этой проблемы, конечно, эквивалентно разре¬ 
шимости А (ср. § 1.7). 

Следующий пример (единичной проблемы) — проблема 
разрешимости для множества А; это требование дать ответ 
(«да», «нет») на вопрос: «Разрешимо ли Л?» Другой пример 
массовой проблемы — массовая проблема разрешимости для 
Оеп (Ц7) и для фиксированного способа программирования 
породимых подмножеств ансамбля ІЕ; проблема состоит в 
том, чтобы обеспечить ответ на каждый вопроа «Является 
ли подмножество с программой порождения р разрешимым?» 
К сожалению, термины (а потому и понятия) «проблема раз¬ 
решения», «проблема разрешимости», «массовая проблема 
разрешимости» часто смешиваются друг с другом. То же са¬ 
мое верно для следующей тройки терминов (и понятий): 
«проблема отделения», «проблема отделимости», «массовая 
проблема отделимости». Такое смешение тем более прискорб¬ 
но, что в ряде случаев четкое различение существенно про¬ 
ясняет ситуацию, как это видно на примере обсуждаемых 
в п. 2.1.4 результатов из [Мучник, 1965]. 

Приведем теперь необходимые определения, связанные с 
задачей отделения. Пусть А, В суть подмножества ансамбля 
\Ѵ. Отделяющая функция для пары (А, В) — это всюду 
определенное отображение ІЕ в («да», «нет»}, принимающее 
значение «да» на всех элементах А и значение «нет» на всех 
элементах В. 

Проблема отделения для пары {А, В) состоит в нахож¬ 
дении алгоритма, вычисляющего отделяющую функцию для 
этой пары. Множество Л, В называются отделимыми, если 
такой алгоритм существует. Единичная проблема отдели¬ 
мости для пары множеств (Л, В) — это проблема получить 
ответ («да», «нет») на вопрос: «Отделимы ли Л, В?» Массовая 
проблема отделимости для Оеп (Щ для фиксированного 
способа программирования состоит в том, чтобы обеспечить 
ответ на любой вопрос (для любой пары порождающих про¬ 
грамм): «Являются ли породимые множества с порождающи¬ 
ми программами рі и р 2 отделимыми?» Наконец, проблема 
продолжения для функции / из X в У, где X, У — ансамб- 
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ли, состоит в нахождении алгоритма, вычисляющего та¬ 
кую функцию из X в 7, которая служит продолжением 
функции / на весь ансамбль X. Предоставляем читателю 
самому сформулировать единичную и массовую проблемы 
продолжаемости. 

Понятие массовой проблемы несколько расплывчато, и ес¬ 
тественно попытаться найти его формальный эквивалент. 
Обычный способ нахождения такого эквивалента заклю¬ 
чается во введении понятия алгоритмической массовой проб¬ 
лемы. Чтобы задать алгоритмическую массовую проблему, 
следует указать: 

1) породимое множество X (множество вопросов, или 
единичных проблем); 

2) породимое множество 7 (множество ответов, или еди¬ 
ничных решений); и 

3) подмножество ЕсХ (ограничение на вопросы); 

4) подмножество ЦсХхУ (отношение «вопрос — от¬ 
вет»), или вопросно-ответное отношение. 

Тогда проблема состоит в требовании найти алгоритм из 
X в У, преобразующий каждый вопрос а ^ Е в ответ 
$$У со свойством (а, В приведенном выше при¬ 

мере с квадратным уравнением 

Х = ^, 7 = 0, Е = X, (<п, г> || г—х 0 \< ІО - ", 

где х 0 —требуемый корень}. 

Другой пример: 

7 = 0, Д={<а, Ь, с, п>\Ы — 4ас^0}, 

#={«а, Ъ, с, я>, г>11 г—х 0 \< 10-”}, 

где х 0 — наименьший корень уравнения ах 2 +Ьх+с= 0. 

Замена массовой проблемы на соответствующую алго¬ 
ритмическую массовую проблему позволяет представить 
неясное понятие в виде точного определения. В частности, 
возникают точные понятия алгоритмических массовых про¬ 
блем разрешимости и отделимости. Кроме того, указанная 
замена превращает массовую проблему в единичную. 
Действительно, алгоритмическая массовая проблема заклю¬ 
чается в требовании представить единичный объект, явля¬ 
ющийся решением, а именно алгоритм (ср. проблемы раз¬ 
решения и отделения выше). 

Разумеется, наличие решения у каждой единичной проб¬ 
лемы из составляющих данную массовую проблему, т. е. 
наличие для каждого а из Е такого р, что (а, |3)€Р, еще 
не означает наличия решения у соответствующей алгорит- 
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мической массовой проблемы. Например, если фиксирован 
способ программирования, то для каждой программы вы¬ 
числимой функции существует программа той же функции, 
имеющая минимальный объем; однако не существует ал¬ 
горитма, дающего по каждой программе эквивалентную 
программу минимального объема. 

Вот три характерных примера из [Матиясевич, 1974]. 

Пример 1 (см. также [Матиясевич, 1974а]). Еще в 
1908 г. Туэ доказал, что для каждой неприводимой бинар¬ 
ной формы Р не менее чем третьей степени с целыми коэф¬ 
фициентами справедливо утверждение (все переменные — 
целочисленные): 

ѴаЭрѴхѴу [Р(х, у) = а^М-Н^|<Р]. 

Понадобилось, однако, 60 лет, чтобы доказать наличие ал¬ 
горитма, дающего р по Р и а (см. [Бейкер, 1968]). 

Пример 2 (см. также [Дейвис, Матиясевич, Робин¬ 
сон, 1976]). Имеет место теорема Рота (см. [Рот, 1955]) 

ѴѲѴгЭ$ѴрѴ<7 > 5=>| ѳ —><Г ?_7 '], 

где Ѳ — алгебраическое, г — положительное рациональное, 
р, <7, я — целые числа; в то же время не известно никакого 
способа для нахождения з по Ѳ и г. 

Пример 3. Матиясевич в [Матиясевич, 1974а] по¬ 
строил полином А с целочисленными коэффициентами, для 
которого 

ѴаЭрѴг/Ѵг*. .. Ѵг„ [А (а, г и .... г„) = 

= у + 4х=^«/ + гі + ...+2„<Р] 

(здесь а, |3, у, г,, . . ., г„— натуральные числа), но невоз¬ 
можен алгоритм получения р по а. 

Каждая проблема разрешения является алгоритмической 
массовой проблемой. Действительно, пусть Ѵ7 — ансамбль 
и А с. Ѵ7. Тогда проблема разрешения для А имеет (как ал¬ 
горитмическая массовая проблема) И7 в качестве множества 
вопросов и то. же Ѵ7 в качестве ограничения на вопросы; 
множество ответов — это («да», «нет»}, и вопросно-ответ¬ 
ное отношение — это множество {(м>, «да»>| ы> € А } I) (<м>, 
«нет»>| И7\Л}. 

Многие алгоритмические массовые проблемы могут быть 
переформулированы как проблемы разрешения или сведе¬ 
ны к таким проблемам (а именно к проблеме разрешения 
для области определения подходящей функции или к про- 



150 ЧАСТЬ ВТОРАЯ- МАТЕМАТИЧЕСКИЕ ПРИЛОЖЕНИЯ 

блеме разрешения для самой функции, рассматриваемой 
как множество). 

Фиксируем, к примеру, ансамбль И7, некоторую ѴР- 
представительную порождающую модель и ее ансамбль 
программ, скажем Р. 

Тогда алгоритмическая массовая проблема разрешимости 
для Оеп (И 7 ) есть проблема разрешения для некоторого под¬ 
множества множества Р, а именно для множества {р|р яв¬ 
ляется программой разрешимого множества}. Алгоритми¬ 
ческая массовая проблема отделимости для Оеп (1У) есть 
проблема разрешения для некоторого подмножества мно¬ 
жества РхР, а именно для множества {{р ь р 2 )|множества, 
породимые посредством программ рі и р 2 , отделимы}. 

Однако подлинная значимость проблем разрешения оп¬ 
ределяется их гносеологическим аспектом: это суть пробле¬ 
мы распознавания свойств. Центральной, хотя заведомо 
нерешимой проблемой разрешения является такая проблема: 
по произвольному математическому утверждению устано¬ 
вить, верно оно или нет. 

Как уже было отмечено в преамбуле к этой части, построе¬ 
ние алгоритма, служащего решением той или иной алгорит¬ 
мической массовой проблемы, не является приложением 
общей теории алгоритмов, а принадлежит той области мате¬ 
матики, к которой относится рассматриваемая массовая 
проблема. Математика полна таких алгоритмов. 

С другой стороны, если такого алгоритма не существует, 
доказательство его несуществования принадлежит прило¬ 
жениям общей теории алгоритмов. Многие такие теоремы 
несуществования были доказаны для проблем разрешения, 
поставленных, как правило, для породимых множеств (этот 
эффект разъясняется в § 1.10). Вот простой пример пробле¬ 
мы разрешения (он принадлежит Чёрчу, см. [Чёрч, 1936]): 
по произвольному натуральному п определить, существуют 
ли такие положительные натуральные х, у, г, что г п = 
=х п +у п ; относительно решаемости этой проблемы ничего 
ие известно; очевидно лишь, что множество всех тех п, 
для которых ответ — «да, существуют», породимо. 

Популярная экскурсия в область решимых и нерешимых 
массовых проблем предпринята в [Успенский, Семенов, 
1985]. Обзор работ по этой тематике, выполненных в школах 
Новикова и Маркова, дан соответственно в [Адян, Маканин, 
1984] и [Матиясевич, 1984]. 

Первые доказательства нерешимости алгоритмических 
массовых проблем относятся к 1936 г.; они были опублико- 
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ваны Чёрчем и Тьюрингом в [Чёрч, 1936], [Чёрч, 1936а], 
[Чёрч, 19366] и в [Тьюринг, 1936], [Тьюринг, 1937]. Эти 
нерешаемые проблемы являются проблемами разрешения и 
связаны с предложенными этими авторами представитель¬ 
ными порождающими (в виде ^-конверсии Чёрча) и вычис¬ 
лительными (в виде машин Тьюринга) моделями; однако 
уже Чёрч заметил (и об этом говорит само название его 
публикации [Чёрч, 1936]), что тем самым возникает нере-, 
шимая массовая проблема внутри элементарной теории 
чисел. 

2.1.1. Семь нерешимых проблем. Из числа наиболее за¬ 
мечательных нерешимых проблем разрешения мы выделяем 
следующие семь по принципу философской значимости или 
наглядности формулировки. 

1. Проблема распознавания истинности формул эле¬ 
ментарной арифметики. Эти формулы строятся с помощью 
арифметических действий (сложения и умножения), логи¬ 
ческих операций (логических связок и кванторов) и знака 
равенства из константы 0 и натуральнозначных перемен¬ 
ных. Проблема состоит в требовании найти алгоритм, ко¬ 
торый по всякой такой формуле определял бы, истинна она 
на натуральном ряду или нет. Невозможность такого алго¬ 
ритма немедленно следует из существования неразрешимо¬ 
го перечислимого множества натуральных чисел (§ 1.10) 
и того, что такое множество является арифметическим 
(§1-9). 

2. Проблема разрешения для логики предикатов первого 
порядка (баз ЕпІ5сЬеібип§зргоЫет) — см. ниже, § 2.3. 

3. Проблема сочетаемости Поста. Пусть дано конечное 
множество V пар слов в некотором алфавите. Назовем это 
множество сочетаемым, если для некоторых пар ( Аі , В*), 
(Л 2 , В 2 ), . . ., (Л 5 , В 3 ) из V выполняется равенство А%. . . 

... А 3 —Ві. , .В,. Требуется по всякому конечному множе¬ 
ству V пар слов в данном алфавите алгоритмически устано¬ 
вить, сочетаемо оно или нет. Эту проблему поставил Пост в 
[Пост, 1946] и в той же статье показал, что соответствую¬ 
щего алгоритма не существует, если только алфавит содер¬ 
жит более одной буквы (в случае однобуквенного алфавита 
проблема решима). Усиление этого результата’, фиксирую¬ 
щее число элементов V, см. в [Марков, 1954, гл. VI, §9], 
где доказано, что алгоритма нет уже при числе элементов V, 
равном 90 (и любом неоднобуквенном алфавите). 

4. Проблема эквивалентности слов для ассоциативного 
исчисления. Принадлежащее Туэ понятие ассоциативного 
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исчисления (введенное в [Туэ, 1914] ) было определено в 
добавлении к§ 1.3. Пусть, в обозначениях этого добавления, 
фиксированы два кортежа А и В. В [Туэ, 1914, § II] форму¬ 
лируется следующая массовая проблема, названная там 
«задачей (I)»: «Найти метод, позволяющий при помощи ис¬ 
числимого (ЬегесЬепЬаге) числа операций всегда решать, 
будут ли эквивалентны два произвольных ряда зна¬ 
ков». 

Другими словами, проблема — для данного ассоциатив¬ 
ного исчисления — состоит в построении алгоритма, рас¬ 
познающего по всякой паре Б-слов, эквивалентны ли эти 
слова в данном исчислении или нет. В силу сказанного в 
добавлении к §1.3, эта проблема совпадает с проблемой 
распознавания равенства слов в полугруппе с множеством 
образующих Б, заданной совокупностью равенств 
/— 1 , . . ., п (см. [Нагорный, 1977а]). Сам Туэ в своей зада¬ 
че (I) молчаливо предполагает все элементы кортежей А и 
В непустыми словами. Однако отдельно (в [Туэ, 1914, 
§ III]) Туэ ставит аналогичную проблему — «задачу (II)» — 
для случая, когда А состоит из единственного слова В, а 
В — в современной терминологии — из пустого слова А. Эта 
последняя проблема оказалась решимой, см. [Адян, 1966, 
гл. III, §3, теорема 3]. 

Существуют ассоциативные исчисления с нерешимой про¬ 
блемой эквивалентности. Первые такие примеры построили 
в 1947 г. независимо Марков (см. [Марков, 1947], [Марков, 
1947а], [Марков, 1954, гл. VI]) и Пост (см. [Пост, 1947]). 
Первоначальные примеры, однако, были довольно громозд¬ 
кими. В [Цейтин, 1958] приведен следующий пример ассо¬ 
циативного исчисления в пятибуквенном алфавите, пробле¬ 
ма эквивалентности для которого не имеет решения (соот- 
вествующие друг другу элементы кортежей А и В соединены 
знаком равенства, как в задании полугруппы): 1) ас=са, 
2) аЛ=йа, 3) Ьс—сЬ, 4) Ьй—йЬ, 5) еса—се, 6) ейЬ=ёе, 
7) сса=ссае. 

В [Матиясевич, 1967] указано ассоциативное исчисление 
в двубуквенном алфавите с тремя определяющими соотно¬ 
шениями и нерешимой проблемой эквивалентности; в са¬ 
мом длинном из этих соотношений в левой части состоит 
слово из 304 букв, а в правой — слово из 608 букв. Для 
ассоциативных исчислений с двумя соотношениями мало 
что известно. Для ассоциативных исчислений (соответствен¬ 
но полугрупп) с одним определяющим соотношением разре¬ 
шающий алгоритм существует в широком классе случаев 
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(см. [Адян, 1966], [Адян, Оганесян, 1978]) и есть надежда, 
что он существует всегда. 

Можно ограничивать рассматриваемый класс ассоциа¬ 
тивных исчислений и иным путем, нежели сокращая число 
определяющих соотношений. Особый интерес представляет 
случай, когда соответствующая данному ассоциативному 
исчислению полугруппа является группой. Частным слу¬ 
чаем таких исчислений являются инверсивные исчисления 
(см. [Нагорный, 1977в]; алфавит каждого такого исчисления 
имеет вид а и а 2 , . . ., а п , а „\ а 2 х , . . ., ай 1 , и в число оп¬ 
ределяющих состояний обязательно входят, для каждого і, 
«тривиальные» соотношения а,а, г1 =Л и Л=аГ 1 а г ). В 1952 г. 
Новиков (см. [Новиков, 1952], [Новиков, 1955]) построил 
первый пример инверсивного исчисления с нерешимой про¬ 
блемой эквивалентности; этот пример дал ответ на первую 
из поставленных в 1912 г. М. Деном проблем — на проблему 
тождества для конечноопределенных групп (а именно про¬ 
демонстрировал невозможность решить эту проблему). 

5. Проблема представимости матриц. По определению 
матрица V представима через матрицу Ѵ и . . ., Ѵ д , если 
для некоторых /у, г і выполняется равенство II— 

і 

= Д ІІг г Далее рассматриваются квадратные матрицы 

Ѣ=і 1 

порядка п с целыми коэффициентами. Общая проблема пред¬ 
ставимости состоит в требовании указать алгоритм, по¬ 
средством которого можно было бы узнавать для любой сис¬ 
темы матриц II, Ѵі, . . ., Ѵ д порядка п, представима ли ІІ 
через II и .... V г Как установил Марков (см. [Марков, 
1958]), общая проблема представимости для матриц поряд¬ 
ка п не имеет решения при п^4 (в силу [Патерсон, 1970], 
см. ниже, число 4 можно заменить на 3). 

Частная проблема представимости для фиксированных 

матриц Ѵі . Цд состоит в требовании указать алгоритм, 

посредством которого можно было, бы узнавать для любой 
матрицы ІІ, представима ли она через 0і, . . ., II д . В [Мар¬ 
ков, 1958] выписываются 27 матриц шестого порядка, для 
которых частная проблема представимости оказывается не¬ 
решимой. Другая частная проблема представимости мат¬ 
риц состоит в том, чтобы для фиксированной матрицы указать 
алгоритм, посредством которого можно было узнавать для 

любых матриц Ѵі, . . ., Ѵ ч , представима ли V через Ѵі . 

Vд. В [Патерсон, 1970] доказано, что эта частная проблема 
нерешима, если V есть нулевая матрица третьего порядка. 



154 ЧАСТЬ ВТОРАЯ МАТЕМАТИЧЕСКИЕ ПРИЛОЖЕНИЯ 

6. Десятая проблема Гильберта. Десятая из 23 проблем 
Гильберта (1900 г.) формулируется так: «10. Задача о раз¬ 
решимости диофантова уравнения. Пусть задано диофан- 
тово уравнение с произвольными неизвестными и целыми 
рациональными числовыми коэффициентами. Указать спо¬ 
соб, при помощи которого возможно после конечного чис¬ 
ла операций установить, разрешимо ли это уравнение в 
целых рациональных числах. 11 . . .» ([Гильберт, 1935, 
с. 310]). Невозможность решения десятой проблемы следует 
из сочетания двух факторов: а) существования неразреши¬ 
мого перечислимого множества натуральных чисел (см. 
§ 1.10) и б) диофантовости всякого перечислимого числового 
множества (см. § 1.9). Остается открытым вопрос, как уз¬ 
нать по произвольному диофантову уравнению, разрешимо 
ли оно в рациональных (не обязательно целых) числах, и 
можно ли это узнать вообще (т. е. возможен ли соответ¬ 
ствующий алгоритм). 

7. Проблема тождества элементарных функций веще¬ 
ственного переменного. Определим класс термов Т индук¬ 
тивно: х (переменная икс), л (число «пи») — термы; если ы, 
ѵ — термы, то ( и+ѵ ), (и-ѵ), (иіѵ), зіп и, ]«|—термы 
(в [Успенский, Семенов, 1981] в результате опечатки терм 
(и-ѵ) пропущен). Проблема построения алгоритма, узна¬ 
ющего по двум термам из Т, задают ли они одну и ту же 
функцию одного вещественного переменного х, нерешима. 
(см. [Матиясевич, 1973]). Можно сформулировать ряд 
других нерешимых проблем, касающихся функций вещест¬ 
венного переменного. Таковой является проблема существо¬ 
вания вещественного корня у функции, задаваемой термом, 
аналогичным термам из Т, но с использованием дополнитель¬ 
но произвольных рациональных констант и без использо¬ 
вания деления и абсолютной величины (см. [Уанг, 1974]). 
Другим примером является проблема существования у 
функции, заданной термом из некоторого фиксированного 
класса, первообразной, задаваемой термом того же класса. 
Эта проблема нерешима для различных классов термов 
(см. [Ричардсон, 1968]). Таким образом, уже обычное ин¬ 
тегральное исчисление дает возможность получения нере¬ 
шимых алгоритмических проблем. 

2.1.2. Массовые проблемы в математике. Массовые 
проблемы возникают во всех областях математики. Наиболее 
фундаментальные из них — это проблемы выяснения ис¬ 
тинности утверждений, формулируемых в некотором мате¬ 
матическом языке. Реальные математические языки всегда 
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допускают рассмотрение натуральных чисел о обычными 
операциями над ними (а как правило, еще и переменные 
по множествам и функциям), поэтому {см. первую из семи 
нерешимых проблем) возникающие при этом множества 
истинных формул оказываются неразрешимыми. 

Таким образом, вопрос о разрешимости множества ис¬ 
тинных формул некоторой логической теории оказывается 
нетривиальным, только если выразительные средства и 
объекты рассмотрения этой теории весьма ограничены. 
В частности, отказ от автоматически приводящего к нераз¬ 
решимости использования предикатных и функциональных 
переменных фактически приводит к тому, что рассматривае¬ 
мые массовые проблемы касаются алгебраических объектов. 
Для этого есть и другая причина; дело в том, что во многих 
важных случаях алгебраические объекты допускают есте¬ 
ственное конструктивное задание, поэтому вопросы о них 
легко формулируются в алгоритмической форме. 

Итак, нетривиальные результаты о разрешимости или 
неразрешимости логических теорий относятся, в основном, 
к элементарным теориям алгебраических систем. Наиболее 
тонкие из них касаются алгебраическихсистем, расположен¬ 
ных вблизи границы между разрешимостью и неразреши¬ 
мостью, важнейшие факты относятся к ходу этой границы 
среди полей: неразрешима элементарная теория поля 
рациональных чисел (см. [Робинсон, 1949]), разрешима 
элементарная теория поля действительных чисел (см. 
[Ершов Ю., 1980, гл. 5, § 5, предложение 1]) и элементарная 
теория поля р-адических чисел (при любом р) (см. [Ер¬ 
шов Ю., 1980, гл. 5, § 5, предложение 4]). 

Для других алгебраических систем возникающие элемен¬ 
тарные теории, как правило, неразрешимы (так обстоит 
дело, в частности, для групп, колец и многих классов этих 
алгебраических систем, см. [Тарский, Мостовский, Робин¬ 
сон, 1953]); например, неразрешима элементарная теория 
класса всех простых конечных групп (см. [Ершов Ю., 
1964а]). К немногим исключениям относятся абелевы груп¬ 
пы и некоторые классы упорядоченных множеств (см. [Ер¬ 
шов Ю., 1964], [Рабин, 1969]), а также произвольные сво¬ 
бодные алгебры (это следует из [Мальцев, 1962, теорема 5]). 
Подробные таблицы, суммирующие результаты о нераз¬ 
решимости и разрешимости элементарных теорий, имеются 
в [Ершов Ю., Лавров, Тайманов, Тайцлин, 1965] и [Сан- 
каппанавар, 1978] (в последней работе приводятся также 
сведения о некоторых неэлементарных теориях). О разре- 
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шимости логических (не обязательно элементарных) теорий 
см. также [Семенов, 1984], [Семенов, 1986]. 

Если мы хотим сформулировать алгоритмическую мас¬ 
совую проблему, касающуюся элементов какой-либо алгеб¬ 
раической системы, то необходимо сопоставить с этими эле¬ 
ментами некоторые конструктивные объекты. Элементы 
фиксированной свободной конечнопорожденной алгебраи¬ 
ческой системы можно считать уже лежащими в подходяще 
выбранном словарном ансамбле (или ансамбле деревьев, 
см. § 1.0 и добавление к § 1.3). В общем случае, если какая- 
то (не обязательно свободная) алгебраическая система 
конечно порождена, т. е. имеет конечную сигнатуру и конеч¬ 
ное число образующих, всякий ее элемент может быть опять- 
таки задан некоторым конструктивным объектом — выра¬ 
жением этого элемента через образующие (термом). При 
этом, однако, различные конструктивные объекты могут 
задавать один и тот же элемент. Возникает алгоритмическая 
проблема распознавания равенства, т. е.— для заданной ал¬ 
гебраической системы — выяснения того, задают ли два про¬ 
извольно выбранные конструктивные задания один и тот же 
элемент системы. Как уже отмечалось, для некоторых полу¬ 
групп и для некоторых групп эта проблема оказывается не- 
решимой — даже если ограничиться только конечноопре¬ 
деленными группами и полугруппами. 

Ясно, что сама постановка алгоритмической проблемы 
распознавания равенства существенно зависит от того, в 
каком классе конструктивных объектов, задающих элементы 
фиксированной алгебраической системы, эта проблема ста¬ 
вится, т. е. для пар каких именно объектов ищется соответ¬ 
ствующий алгоритм. Можно считать, что конструктивными 
заданиями элементов являются всевозможные тер¬ 
мы, составленные из образующих и сигнатурных операций. 
Однако не менее естественны и такие подходы, при которых 
конструктивными заданиями признаются только неко¬ 
торые из термов. 

Проиллюстрируем сказанное на примере группы с об¬ 
разующими а, Ъ. Проблему распознавания равенства можно 
ставить при следующих вариантах понимания того, что есть 
конструктивное задание элемента группы. 

1. Конструктивное задание есть произвольный терм, сос¬ 
тавленный из образующих, операции умножения, операции 
обращения и скобок, например терм 


(Ь(а~ 1 Ь))~ 1 (Ьа). 
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2. Конструктивное задание есть «бесскобочный терм», а 
именно такой терм, в котором операция обращения приме¬ 
няется только к образующим, а все левые скобки собраны 
в начале терма и потому вместе с правыми опущены в 
записи. 

Пример: Ъ~ х аЬг х Ьа. 

3. Конструктивное задание есть «несократимый терм» 
(иначе — элемент свободной группы с образующими а, Ъ), 
т. е. такой бесскобочный терм, в котором никакая образую¬ 
щая не стоит рядом со своим обращением. Пример: 
Ъг х аа. 

4. (Только для абелевых групп!) Конструктивное за¬ 
дание есть «упорядоченный терм» (иначе — элемент сво¬ 
бодной абелевой группы с образующими а, Ь), т. е. такой 
несократимый терм, в котором все буквы а идут впереди 
всех букв Ь. Примері ааЬ~ х . 

Каждый из этих вариантов понимания конструктивного 
задания приводит к своему варианту алгоритмической про¬ 
блемы распознавания равенства. В нашем теоретико-груп¬ 
повом примере существование решения у любого из вариан¬ 
тов проблемы приводит к решению для любого другого ва¬ 
рианта. 

Попытаемся дать математическую картину того, как об¬ 
стоит дело с постановкой (только с постановкой!) алгорит¬ 
мической проблемы равенства в общем виде, т. е. для произ¬ 
вольной конечнопорожденной алгебраической системы, т. е. 
системы, порожденной конечной сигнатурой сг. Можно счи¬ 
тать, что элементами всякой такой системы 33 являются 
классы подходящим образом выбранной конгруэнции 6 
наЗЦо), где 31 (о) — свободная алгебраическая система, по¬ 
рожденная сигнатурой а (см. добавление к § 1.3). Два терма 
из Я (а), принадлежащие одному и тому же классу конгру¬ 
энции, называются «равными в 33». Абсолютная проблема 
распознавания равенства в 33 состоит в отыскании алгорит¬ 
ма, распознающего по любым двум термам из 3( (о), равны 
ли они в 33. Однако возможны и относительные проблемы 
распознавания. Чтобы поставить относительную проблему 
распознавания равенства в 33, надо выбрать: 1) некоторое 
подмножество ЕаУІ (а), элементы которого называются 
приведенными термами, и 2) некоторое вычислимое ото¬ 
бражение Н множества 31 (о) в Е, называемое процедурой 
приведения, причем такое, что іик(і) равны в 33 для любого 
(Например, в третьем варианте нашего теоре- 
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тико-группового примера приведенные термы — это не¬ 
сократимые термы, а процедура приведения приводит каж¬ 
дый терм к несократимому виду.) 

Проблема распознавания равенства в 23 относительно 
Е и к состоит в отыскании алгоритма, распознающего ра¬ 
венство в 23 по любым двум приведенным термам. При 
наложенных на Е и к требованиях существование решения 
у относительной проблемы равносильно существованию ре¬ 
шения у абсолютной проблемы. На все сказанное можно 
посмотреть с точки зрения теории нумераций (см. § 1.15). 
Задание элементов 23 термами из Ш. (о) есть не что иное, 
как стандартная нумерация системы 23. Поэтому наличие 
решения у абсолютной проблемы распознавания равенства 
означает просто разрешимость этой нумерации. Далее, 
каждая относительная проблема, точнее, каждое указание 
Е и Н также приводит к некоторой нумерации ѵ системы 23, 
а именно к нумерации с основанием Е. Нумерация ѵ зада¬ 
ется так: каждому терму і € Е ставим в соответствие тот 
класс конгруэнции Ь, в котором этот терм находится. В 
силу наложенных на Е и к ограничений нумерация ѵ экви¬ 
валентна по Колмогорову стандартной нумерации (причем Н 
сводит стандартную нумерацию к ѵ); поэтому они обе одно¬ 
временно разрешимы или неразрешимы. 

Проблема распознавания равенства (для данной алгебра¬ 
ической системы) является представителем большого клас¬ 
са проблем, состоящих в распознавании различных свойств 
элементов системы, пар таких элементов (как в случае рас¬ 
познавания равенства), троек и т. д. Разумно ограничиться 
свойствами, имеющими алгебраический смысл, т. е. форму¬ 
лируемыми в алгебраических терминах. Что это такое, будет 
уточнено в § 2.5 при определении понятия алгебраически 
корректной алгоритмической массовой проблемы. 

Разумеется, можно интересоваться распознаванием 
свойств не только элементов какой-нибудь алгебраической 
системы, но и самих систем (первые свойства естественно 
называть « внутренними », а вторые — « внешними »). Для 
того чтобы рассмотреть соответствующие массовые пробле¬ 
мы, нужно сопоставить конструктивные объекты уже не о 
элементами систем, а с самими системами. Это естественно 
делается в случае, когда алгебраическая система задается 
породимым (в частности, конечным) множеством соотноше¬ 
ний (равенств, тождеств, квазитождеств, см. добавление к 
§ 2.3). Именно задание конечным множеством определяющих 
соотношений (а конкретнее — равенств) мы и будем сейчас 
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иметь в виду при обсуждении внешних свойств алгебраиче¬ 
ской системы. 

Важнейшим примером внешнего свойства является изо¬ 
морфия двух алгебраических систем. Для конечноопреде¬ 
ленных групп проблема распознавания изоморфии (так 
называемая третья проблема Дена) была поставлена Деном 
в [Ден, 1912] наряду с проблемой распознавания внутрен¬ 
него свойства — равенства двух элементов заданной 
группы. Нерешимость проблемы распознавания изоморфии 
конечноопределенных групп вытекает из конструкции, 
использованной при построении группы с нерешимой проб¬ 
лемой распознавания равенства. 

Набросок доказательства неразрешимости проблемы изо¬ 
морфии для групп содержится в [Новиков, 1958], более 
подробно это доказательство изложено в [Адян, 1973]. 
Более того, для конечноопределенных групп нерешима и 
частная проблема изоморфии: для произвольной конечно¬ 
определенной группы Ро невозможен алгоритм, распознаю¬ 
щий по заданию произвольной конечноопределенной группы 
Р, изоморфны Р и Р в или нет (см. [Адян, 1955], [Адян, 1956], 
[Адян, 1957]). И общая, и частная проблемы изоморфии 
принадлежат к числу проблем распознавания инвариантных 
(т. е. сохраняющихся при изоморфизмах) свойств алгеб¬ 
раических систем и их кортежей. Вот еще инвариантные 
свойства групп: «быть абелевой», «быть конечной», «быть 
циклической», «быть простой». Для каждого из этих свойств 
проблема его распознавания по заданию конечноопределен¬ 
ной группы нерешима (см. [Адян, 1955], [Адян, 1957]). 
Все перечисленные свойства групп являются марковскими; 
определение сейчас будет дано. 

Инвариантное свойство полугрупп (соответственно групп) 
а называется марковским, если, во-первых, имеется конеч¬ 
ноопределенная полугруппа (группа), обладающая свойст¬ 
вом а, и, во-вторых, имеется конечноопределенная полугруп¬ 
па (группа), не вложимая ни в какую конечноопределенную 
полугруппу (группу) со свойством а. Каково бы ни было 
марковское свойство, алгоритмическая проблема его рас¬ 
познавания нерешима. Для полугрупп это установил Мар¬ 
ков (см. [Марков, 1952, п. 11.1], [Марков, 1954, гл. VI, 
§ 11]), для групп — Адян (см. [Адян, 1957а], [Адян, 19576], 
[Адян, 1958]). Одно из следствий этого результата Адяна 
устанавливает следующую дополнительность между внут¬ 
ренними и внешними свойствами ■ конечноопределенных 
групп: пусть К. — непустой замкнутый относительно, изо- 
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морфизмов класс конечноопределенных групп, тогда в клас¬ 
се К имеется группа с нерешимой проблемой распознавания 
равенства, или проблема принадлежности конечноопреде¬ 
ленной группы классу К нерешима (см. [Адян, 1973]). 
Несмотря на обилие нерешимых свойств конечноопределен¬ 
ных групп, для некоторых естественных свойств существует 
разрешающий алгоритм, примером такого (внешнего) свой¬ 
ства является свойство «совпадать со своим коммутан¬ 
том» (см. [Адян, 1957а]). 

Отметим, наконец, еще один класс проблем, лежащий в 
«произведении» внешних и внутренних проблем,^- это так 
называемые общие (другими словами, равномерные) про¬ 
блемы. Общая проблема ставится для некоторого класса 
алгебраических систем и состоит в отыскании общего метода 
решения некоторой внутренней проблемы для всех систем 
этого класса, т. е. алгоритма, который по заданию системы 
и исходному данному внутренней проблемы, относящейся 
к этой системе, давал бы ответ на внутреннюю пробле¬ 
му. 

Пример: общая проблема распознавания равенства для 
групп состоит в том, чтобы по заданию всякой группы и паре 
слов в алфавите образующих этой группы, определить, 
равны ли эти слова в этой группе или нет. Разумеется, если 
некоторая внутренняя проблема нерешима для одной алгеб¬ 
раической системы заданного класса, то соответствующая 
общая проблема также нерешима; для большинства общих 
проблем дело обстоит именно так. Однако существуют есте¬ 
ственные проблемы, для которых ситуация иная. 

Именно, рассмотрим следующую внутреннюю проблему: 
«По всякому элементу х полугруппы с единицей узнать, 
существует ли такой элемент у, что ху равно в полугруппе 
единице». Эта проблема решима для каждой конечноопре¬ 
деленной полугруппы с сокращением, однако общая пробле¬ 
ма в классе всех конечноопределенных полугрупп о сокра¬ 
щением нерешима (см. [Адян, 1955а]). О других алгоритми¬ 
ческих проблемах алгебры см. [Адян, 1973], [Адян, 1977], 
[Адян, Маканин, 1984], [Матиясевич, 1984], [Чандлер, 
Магнус, 1982]. 

Есть еще одна область, в которой с математическими 
объектами изучения естественно сопоставляются их кон¬ 
структивные описания. Это — комбинаторная топология, 
где с полиэдрами (в частности, триангулируемыми много¬ 
образиями) сопоставляются записи их триангуляций. Коль 
скоро такое сопоставление осуществлено, делается осмыс- 
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ленной проблема гомеоморфии» аналогичная проблеме рас¬ 
познавания равенства слов в группе или проблеме изомор¬ 
фии групп. Согласно [Марков, 1958а], общая проблема гомео- 
морфии для полиэдров (соответственно для триангулируе¬ 
мых многообразий) есть проблема разыскания алгоритма, 
распознающего для любых двух полиэдров (соответственно 
многообразий), заданных своими триайгулйІщйМи, гомео- 
морфны ли они; частные проблемы гомеоморфии возника¬ 
ют, если наложить на рассматриваемую пару полиэдров 
какое-либо ограничение, например указать их размерность 
или фиксировать первый член пары. Некоторые из этих 
проблем были давно решены, например проблема гомеомор¬ 
фии двумерных многообразий. Как установил Марков, 
общая проблема гомеоморфии не имеет решения) более того, 
для всякого 3 можно указать такое п-мерное многооб¬ 
разие, что проблема гомеоморфии многообразий этому 
многообразию нерешима (см. [Марков, 1955а], (Марков, 
1958в]). В [Марков, 19586], [Марков, 1Ѳ62], [Бун, Хакен, 
Поэнару, 1968], [Хакен, 1973] эти результаты усиливаются, 
уточняются и обобщаются. Проблема гомеоморфии трех¬ 
мерных многообразий остается открытой. 

О нетривиальных алгоритмических проблемах в других 
областях математики мало что известно. (Иногда у специа¬ 
листов имеется явное ощущение эффективности некоторого 
построения; в то же время попытка сформулировать соот¬ 
ветствующую алгоритмическую проблему либо вообще ни 
к чему не Приводит, либо же приводит к нерешимой пробле¬ 
ме и тем самым — к неадекватной формулировке.) Все же, 
касаясь других областей математики, выделим два примера 
из теории дифференциальных уравнений; нерешаемость 
проблемы существования решения, определенного на от- 

Е ке [0, 1] у системы дифференциальных уравнений (ем. 

лер, 1969]), и формулировку алгоритмической Проблёмы 
об устойчивости (см. [Арнольд, 1976]). 

Приведем еще два примера просто формулируемых алго¬ 
ритмических массовых проблем, касающихся целых чисел. 
Первая поставлена в [Саломаа, Соиттола, 1978]! по целочис¬ 
ленной матрице узнать, существует ли степень, имеющая 
нуль в правом верхнем углу. Для матриц 4X4распознаю¬ 
щий алгоритм построен Верещагиным (см. [Верещагин, 
1985, теорема 4]); существует ли алгоритм в общем случае, 
неизвестно. Заметим, что для близкой по формулировке 
проблемы «по целочисленной-матрице А и целочисленным 
векторам хм у узнать, существует ли такое і, что А‘х—у », 

6 В. А. Успенский, А. Л. Семенов 
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недавно была доказана решаемость, см. [Каннан, Липтон, 
1980]. 

Вторая проблема касается коммутативных исчислений — 
так называемых систем векторного сложения (ѵесіог айсіі- 
ііоп зузіетз). Она была поставлена Карпом и Миллером в 
работе по параллельным схемам программ в 1969 г. (см. 
ІКарп, Миллер, 1969]). Для краткости приведем мультипли¬ 
кативную формулировку проблемы, в которой используется 
только умножение и отсутствует сложение, хотя аддитив¬ 
ная формулировка и более естественна. Пусть задано на¬ 
туральное число а и конечное множество V рациональных 
чисел. Натуральное число называется достижимым (для 
данных а и У), если оно совпадает с а или получается из до¬ 
стижимого умножением на элемент из V. Требуется узнать, 
достижимо ли данное число Ь. В 1977 г. Сэсердоут н Тенни 
объявили о решении этой алгоритмической проблемы при 
любых фиксированных а и V (см. [Сэсердоут, Тенни, 1977]). 
Однако данное ими описание алгоритма является противо¬ 
речивым; если пытаться устранить противоречия, то оказы¬ 
вается, что получаемые алгоритмы правильно работают 
только в тривиальных случаях, и не видно, как можно 
было бы исправить дело. Прогресс в направлении частич¬ 
ного решения проблемы достижимости был получен в 
[Хопкрофт, Пансьо, 1979]. Наконец, в 1984 г. Майр опуб¬ 
ликовал доказательство существования алгоритма, решаю¬ 
щего проблему достижимости — см. [Майр, 1984]. В наз¬ 
ванной статье указывается, что предварительный вариант 
доказательства был опубликован автором в трудах 13-го 
ежегодного симпозиума «АСМ 5ТОО *) (1981 г.); отмечается 
также, что за время рецензирования статьи [Майр, 1984] 
Косараю <5. К. Козага]ц> опубликовал другой алгоритм 
для решения той же задачи (в трудах 14-го ежегодного 
симпозиума «АСМ ЗТОС», 1982 г.). Истории решения про¬ 
блемы достижимости посвящена заметка [Мюллер, 1985], 
содержащая тезисы выступления автора на коллоквиуме 
по теории вычислимости, состоявшемся в ГДР в 1983 г. 
В этой заметке доказательство Сэсердоута и Тенни характе¬ 
ризуется как ошибочное, а опубликованное в 1981 г. дока¬ 
зательство Майра — как очень сложное и никем не прове¬ 
ренное; основной акцент делается на публикации Косараю, 
упомянутые выше. См. также [Мюллер, 1983]. 


*) Зушрсьіига оп Шеогу оГ сошриііпд. 
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Наш перечень мы закончим наиболее наглядным при¬ 
мером открытой алгоритмической проблемы. Пример связан 
с игрой «Жизнь», изобретенной Дж. Конвеем, см. [Гарднер, 
1970—1971], [Уэзерелл, 1978, гл. 2]. Позиция этой игры — 
бесконечный лист бумаги в клетку. Клетка может быть пус¬ 
той или полной (в другой терминологии — мертвой или жи¬ 
вой соответственно). Полных клеток (ячеек) в позиции может 
быть только конечное число. У каждой клетки восемь (оче¬ 
видных) соседей — четыре соприкасаются с ней по сторо¬ 
нам и четыре — по углам: 



Ход игры состоит в одновременном изменении содержимого 
всех тех клеток, к которым применимо одно из следующих 
правил: 

1) рождение новой ячейки: пустая клетка, имеющая 
ровно трех полных соседей, становится полной; 

2) смерть ячейки: полная клетка, имеющая более трех 
полных соседей, становится пустой (умирает от тесноты); 
полная клетка, имеющая менее двух полных соседей, ста¬ 
новится пустой (умирает от скуки). 

Таким образом, скажем, пустые клетки с одним полным 
соседом остаются пустыми, а полные клетки с двумя полны¬ 
ми соседями остаются полными. Как мы видим, в игре занят 
один партнер (можно считать, что и ни одного), никакого 
конца у нее нет. Тем не менее естественно считать, что игра 
заканчивается, если все клетки становятся пустыми, и в 
этом случае называть позицию, с которой игра началась, 
«вымирающей». Неизвестно, существует ли алгоритм, рас¬ 
познающий по произвольной позиции, «вымрет» ли она. 

2.1.3. Массовые проблемы в смысле Медведева. Наше 
понимание термина «массовая проблема» близко к [Марков, 
1954, гл. V, преамбула]. Более общее и абстрактное пони¬ 
мание было предложено Медведевым в [Медведев Ю., 1955], 
[Медведев Ю., 19561. По Медведеву массовая проблема — 
это произвольное семейство всюду определенных функций 
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из N в N. и массовая проблема называется (алгоритмичес¬ 
ки) разрешимой, если она содержит вычислимую функцию. 
Таким образом, массовую проблему А (в смысле Медведева) 
можно рассматривать как проблему нахождения вычисли¬ 
мой функции в семействе А. Конечно, нет необходимости 
ограничиваться функциями из N в N. можно рассматри¬ 
вать всюду определенные (это существенно) функции из X 
в У для произвольных ансамблей X, У. 

Всякая алгоритмическая массовая проблема (в старом 
смысле), у которой множество вопросов X есть некоторый 
ансамбль и Е (ограничение на вопросы) равно X, может 
рассматриваться как массовая проблема в смысле Медведева, 
состоящая из тех функций /, определенных на всем X, для 
которых <х, /(х)>€Я при всех х$Х (здесь Я — вопрос¬ 
но-ответное отношение). Такое толкование допускают# в 
частности, проблемы разрешения и отделения. 

1. Проблеме разрешения для множества АсХ соответ¬ 
ствует семейство, состоящее из единственной функции <р 
такой, что ф(х) = 1 для всех х(ЕЛ и ф(х)=0 для х€Х\Л 
(так что ф — характеристическая функция для А). 

2. Проблеме отделения для пары множеств <Л, В>, где 
АсХ, ВсХ, соответствует семейство всех отделяющих 
функций для (Л, В) (функция ф называется отделяющей 
для (Л, В), если она определена на всем X и ф(х) = 1 для 
х(ЕЛ, ф(х)=0 для х$В). 

3. Проблеме продолжения для функции / из X и У соот¬ 
ветствует семейство всех функций из X в К, определенных 
на всем X и служащих продолжениями функции /. 

Однако не всякая естественно возникающая массовая 
проблема в смысле Медведева есть результат подобного 
истолкования некоторой алгоритмической массовой про¬ 
блемы. Например, для каждого непустого множества ЛсМ 
можно рассмотреть проблему перечиеления этого множества, 
состоящую из всех всюду определенных на N функций, 
область значений которых есть А (очевидно, эта проблема 
разрешима по Медведеву в том и только том случае, когда 
Л перечислимо). Проблема перечисления не может быть 
получена описанным выше способом из алгоритмической 
массовой проблемы. (Это не удивительно, так как задача 
«перечислить данное множество» не представима в виде се¬ 
рии отдельных задач.) 

. Пусть Л, Эд — массовые проблемы в смысле Медведева. 
Из слабой (а следовательно, и из сильной) сводимости (см. 
§ 1.13) $ к Л вытекает, что если Л разрешима, то и 53 раз- 
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решима. По этой причине слабую и сильную сводимость 
из § 1.13, можно интерпретировать как сводимость проблем. 

2.1.4. О пользе правильной терминологии. Закончим 
параграф одним примером четкого различения понятий и 
терминов. В первом абзаце из [Мучник, 1965, § 2] говорится! 
«Теорема 1 показывает, что нельзя свести проблему разре¬ 
шения нерекурсивного множества к проблеме отделимости 
перечислимых множеств в смысле алгоритмической своди¬ 
мости... Однако, как мы докажем далее, можно свести про¬ 
блему разрешения любого перечислимого множества Е 
к проблеме отделимости двух перечислимых множеств 
Е 1 , Е" в следующем смысле ...» (этот смысл далее разъяс¬ 
няется). В терминологии данного обзора основные резуль¬ 
таты [Мучник, 1965] можно изложить такі теорема 1 ут¬ 
верждает, что никакая нерешимая проблема разрешения не 
может сильно сводиться к проблеме отделения для пары не- 
пересекающихся породимых множеств; из доказательства 
теоремы 2 вытекает, что алгоритмическая массовая пробле¬ 
ма разрешимости для Оеп (п)) сводится по разрешимости 
(см. § 1.11) к алгоритмической массовой проблеме отдели¬ 
мости для Оеп (^). (Аналогично, один из результатов за¬ 
метки [Душский, 1969] может быть сформулирован такі 
всякая проблема разрешения породимого множества сильно 
эквивалентна проблеме продолжения некоторой вычисли¬ 
мой функции с разрешимым графиком.) 

§ 2.2. Приложения к основаниям математики: 

конструктивная семантика 

Возникновение понятия алгоритма и развитие теории 
стимулировались, наряду о практикой, заключающейся в 
решении массовых проблем, также и умозрениями, а имен¬ 
но попытками осмыслить сочетание кванторов ѴхЭу. Оба 
названных аспекта тесно связаны! с одной стороны, если 
массовая проблема имеет решение, то это означает, что (V 
единичная проблема) (3 решение); с другой стороны, обо¬ 
снование утверждения, начинающегося с ѴхЭ у, состоит 
в предъявлении для каждого х соответствующего у, т. е. 
в решении некоторой массовой проблемы. 

Понимание этой последней массовой проблемы как ал¬ 
горитмической является определяющим при разработке так 
называемого конструктивного направления в математике 
(см. [Марков, 1962а], [Шанин, 1962, введение и приложение], 
[Шанин, 1970], [Кущнер, 1973, введение]), пользующегося 
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особой, «конструктивной» логикой рассуждений. В этой 
логике, в частности, обоснование суждения Ѵх(Л(д:)Ѵ 
V ~| А (я)) связывается с построением алгоритма, указываю¬ 
щего для каждого х верный член дизъюнкции (и поэтому 
при неразрешимом А это суждение ложно). 

При том, что конструктивная логика опирается на 
понятие алгоритма, оперирование с алгоритмами в рамках 
этой логики предполагает, в свою очередь, ограничение до¬ 
пускаемых логических средств. В число таких средств Мар¬ 
ков включил (см. [Марков, 1962, с. 11]) следующие два прин¬ 
ципа: 1) если предположение о неограниченной продолжае¬ 
мости процесса применения алгоритма 31 к слову Р опро¬ 
вергнуто, то 31 применйм к Р; 2) если для свойства име¬ 
ется алгоритм, выясняющий для всякого натурального п, 
обладает ли оно этим свойством, и если опровергнуто пред¬ 
положение о том, что ни одно п не обладает свойством ^5, 
то имеется п со свойством Последний принцип впервые 
сформулирован в [Марков, 1954а]; в [Марков, 1956] он 
назван «ленинградским принципом», а в [Марков, 1962а] — 
«методом конструктивного подбора» (см. [также Кушнер, 
1979]). 

Можно, однако, заниматься изучением конструктивной 
логики, пользуясь обычной, «классической» логикой (ср. 
[Новиков, 1977]). Такой подход был намечен Колмогоро¬ 
вым в [Колмогоров, 1932] (Колмогоров писал об интуицио¬ 
нистской логике, но различие между интуиционистской и 
конструктивной логиками в данном случае несущественно). 
Подход Колмогорова состоит в истолковании конструктив¬ 
ной логики как логики задач или проблем-, существенно, что 
для любых двух задач Л и Б и в качестве особой задачи рас¬ 
сматривается задача сведения В к А (ср. § 1.11). 

Этот общий подход позволяет, в частности, интерпретиро¬ 
вать пропозициональные формулы как выражения для за¬ 
дач (а не для утверждений, как в традиционной логике): 
при такой интерпретации значениями пропозициональных 
переменных являются задачи и соответственно понимаются 
пропозициональные связки: А/\В означает «решить и А, 
и В», Л V В — «решить хотя бы одну из задач Л или В», 
А-+В — «свести решение В к решению Л», Л — «предпо¬ 
ложив, что решение Л дано, получить противоречие». 
Аналогично интерпретируются и предикатные формулы. 

Наиболее полно колмогоровский подход воплощен в 
понятии реализуемости по Клини (см. [Клини, 1952, § 82], 
[Новиков, 1977, гл. V, §7]). Реализѵемостная семантика 
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Клини может быть следующим образом изложена в виде 
семантики задач. Каждая арифметическая (т. е. принадле¬ 
жащая элементарной арифметике) формула интерпретиру¬ 
ется как задача нахождения некоторого конструктивного 
объекта, называемого реализацией формулы и кодирующего 
информацию о ее конструктивной истинности; формула на¬ 
зывается реализуемой, если она имеет реализацию. При 
этом, например, для формулы без свободных переменных, 
имеющей вид 'іхА, ее реализацией считается программа 
алгоритма, дающего по любому значению переменной х 
реализацию подстановки этого значения в А вместо х\ 
реализацией формулы вида А-+В (где А и В — формулы 
без свободных переменных) считается программа алгоритма, 
перерабатывающего всякую реализацию А в некоторую ре¬ 
ализацию В. 

Далее определяются реализуемость и неопровержимость 
предикатных (и, в частности, пропозициональных) формул. 
Именно, предикатная формула называется (согласно 
[Плиско, 1978]): 

1) неопровержимой (в [Новиков, 1977] — реализуемой) 
если для каждой подстановки арифметических формул вме¬ 
сто ее предикатных (в частности, пропозициональных) букв 
существует реализация результирующей арифметической 
формулы; 

2) реализуемой (в [Новиков, 1977] — эффективно реа¬ 
лизуемой), если существует алгоритм, указывающий для 
каждой такой подстановки реализацию результата. 

Существуют предикатные формулы, являющиеся неопро¬ 
вержимыми, но не явлющиеся реализуемыми (см. [Плиско, 
1976], [Плиско, 1978]); можно ли найти такую формулу 
среди пропозициональных — неизвестно. Шании в [Шанин, 
1958], [Шанин, 1958а] подверг критике клиниеву концеп¬ 
цию реализуемости (Клини обсуждает эту критику в [Кли¬ 
ни, 1960]) и предложил свой собственный вариант конструк¬ 
тивной семантики; этот вариант связывает конструктивные 
задачи не со всеми суждениями, а лишь с некоторыми и 
опирается на так называемый алгоритм выявления кон¬ 
структивной задачи (а также на алгоритм мажорирования 
арифметических суждений, см. [Шанин, 1973]). 

Другим уточнением замысла Колмогорова служит вве¬ 
денная в [Медведев Ю., 1955], [Медведев Ю., 1956] семан¬ 
тика пропозициональных формул. Подобная же семантика 
была введена в [Мучник, 1963]. Первая семантика основана 
на сильных, а вторая^ на слабых степенях трудности, Для 
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того чтобы представить каждую из семантик как семантику 
проблем, необходимо вспомнить (см. § 1.13, § 2.1), что силь¬ 
ная (соответственно слабая) степень трудности представ¬ 
ляет собой класс эквивалентных массовых проблем в смыс¬ 
ле Медведева, если эквивалентностью проблем считать их 
сильную (соответственно слабую) сводимость друг к другу. 

Итак, возьмем решетку Медведева или решетку Мучника. 
Для произвольного Е из выбранной решетки пропозици¬ 
ональные связки следующим образом интерпретируются 
как операции на начальном сегменте 5 е={Х| 0^Х^Е} 
этой решетки: конъюнкция Д как и, дизъюнкция V как 
П, импликация А-*В есть наименьший элемент (доказы¬ 
вается, что такой существует) множества {СІВ^АііС}; 
наконец, “]А есть А->Е. Всякая доказуемая формула ин¬ 
туиционистского пропозиционального исчисления тождест¬ 
венно принимает значение 0 на любом 5е. Далее, только 
для решетки Медведева: при Е = 1 для формул, не содержа¬ 
щих отрицания, имеет место теорема полноты (см. [Медве¬ 
дев Ю., 1962]): всякая формула такого вида, тождественно 
равная 0 на 5і , доказуема в интуиционистском пропози¬ 
циональном исчислении; для формул, содержащих отрица¬ 
ние, эта теорема полноты очевидным образом нарушается 
(в противоречии со сказанным в [Роджерс, 196?, § 13.1]: 
формула “1 АѴ "1 ІА тождественно равна нулю, но не до¬ 
казуема), и задача о таком выборе Е, чтобы теорема полноты 
имела место для всех формул интуиционистского про¬ 
позиционального исчисления, остается открытой. Имеет 
ли место какая-либо теорема о полноте для решетки Муч¬ 
ника, неизвестно. 

Говоря о конструктивной логике, мы ограничивались 
до сих пор лишь суждениями — их конструктивным пони¬ 
манием и умозаключениями, ведущими к конструктивному 
обоснованию их истинности (следует заметить, впрочем, 
что в конструктивной логике понять суждение — значит 
понять, что является его обоснованием). Однако логика за¬ 
нимается еще и понятиями, и конструктивное осмысление 
понятий также должно составлять предмет конструктивной 
логики. Поскольку истоки современного конструктивного 
направления в математике лежат в интуиционизме, был 
предпринят ряд попыток интерпретации некоторых интуи¬ 
ционистских понятий на основе алгоритмов: в частности, та¬ 
кая попытка осуществлена в [Клини, 1952а] для брауэров- 
ского понятия множества и в [Успенский, 1957, § 7] для 
вейлевского понятия функции. 
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Специфическую область приложений теории алгорит¬ 
мов к конструктйвизации понятий составляет исследование 
определений с точки зрения их конструктивности. Кон¬ 
структивным условно называется такое определение, в 
котором определяемое свойство связывается с наличием 
некоторой конструкцию таково определение перечислимого 
множества. С другой стороны, определение неперечислимого 
множества неконструктивно в том смысле, что состоит в 
простом отрицании наличия соответствующей конструкции. 

Оказывается, что в ряде случаев среди всех объектов, 
не обладающих свойством А — «объектов не Л»,— удается 
выделить объекты, не обладающие свойством А в некотором 
конструктивном смысле — «объекты конструктивно (или 
эффективно) не Л». Именно, объект «конструктивно не 
Л» — это такой объект, для которого существует алгоритм, 
отличающий его от любого объекта, обладающего свойством 
Л. Например, в [Успенский, 1960, § 13] разбираются кон- 
структивизации определений не конечного множества, не¬ 
перечислимого множества и неотделимой пары множеств, 
а в [Успенский, 1974, § 9] вводится общее понятие множе¬ 
ства, эффективно отличного от множеств заданного семей¬ 
ства. Наконец, проблему естественно называть эффективно 
(или конструктивно) нерешимой, коль скоро существует 
алгоритм, отыскивающий для каждого кандидата в решения 
причину, почему этот кандидат не является в действитель¬ 
ности решением; для так называемых параметрических 
проблем в [Медведев Ю., 1969] этот общий и расплывчатый 
замысел конкретизируется в точном понятии эффективно 
опровержимой параметрической проблемы. 

§ 2.3. Приложения к математической логике: анализ 

формализованных языков логики и арифметики 

В [Чёрч, 1956, § 07] математическая логит, или симво¬ 
лическая логит, или логистика, определяется как «предмет 
формальной логики, изучаемый методом построения форма¬ 
лизованных языков». Среди формализованных языков вы¬ 
деляются чисто логические языки (пропозициональные и 
предикатные), языки арифметики и языки теории множеств. 
Предикатные языки, как элементарный (он же узкий или 
первого порядка), так и неэлементарные (расширенные 
или высших порядков), служат для формальной записи 
свойств математических (прежде всего алгебраических) 
структур, в частности для аксиоматического описания раз- 
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личных классов таких структур. Языки арифметики слу¬ 
жат для описания натурального ряда (который вряд ли 
может быть задан аксиоматически и, во всяком случае, 
должен очевидным образом рассматриваться как предше¬ 
ствующий каким-либо аксиоматическим рассмотрениям). 
Языки теории множеств не имеют отчетливой семантики 
и предназначены для записи различных аксиоматических 
теорий. 

В тех случаях, когда это осмысленно, для формул языка 
определяется понятие истинности (на том или ином классе 
обслуживаемых этим языком структур) и ставится алгорит¬ 
мическая массовая проблема распознавания истинности, или 
семантическая проблема разрешения - , построить алгоритм, 
распознающий по формуле языка, истинна она или нет. 
Для языков, обладающих достаточно богатыми выразитель¬ 
ными средствами (а именно достаточно богатыми для того, 
чтобы выразить, в разумном смысле, какой-либо неразре¬ 
шимый предикат), семантическая проблема разрешения ока¬ 
зывается нерешимой. Нерешаемость семантической проблемы 
разрешения для языка арифметики, содержащего ра¬ 
венство, сложение и умножение, отмечалась выше'в § 1. 
Здесь мы заметим только, что нерешаемость этой проблемы, 
т. е. неразрешимость множества истинных формул арифме¬ 
тики, является тривиальным следствием иеарифметично- 
сти указанного множества, а эта неарифметичность, в свою 
очередь, представляет собой простое применение к данному 
случаю известной теоремы Тарского о невыразимости поня¬ 
тия истинности в языке средствами того же языка (см., 
например, [Успенский, 1982, приложение Б]). 

Если для языка арифметики естественно рассматривать 
истинность на одной структуре (на натуральном ряду), то 
для предикатных языков естественно рассматривать истин¬ 
ность на всех мыслимых структурах, или истинность при 
всевозможных интерпретациях; так понимаемая истинность 
называется общезначимостью. Для расширенных предикат¬ 
ных языков само понимание общезначимости наталкивается 
на серьезные трудности теоретико-множественного харак¬ 
тера. Для узкого предикатного языка (иначе — языка 
элементарной логики предикатов) проблема распознавания 
общезначимости привлекала пристальное внимание мате¬ 
матических логиков начиная с 1915 г. (см. [Чёрч, 1956, 
§ 491); эта проблема, получившая название «сіаз ЕпІзсЬеі- 
бип^зргоЫет», названа в [Гильберт, Аккерман, 1938, гл. III, 
§ 12] главной проблемой математической логики. В силу 



5 2.3. АНАЛИЗ ФОРМАЛИЗОВАННЫХ ЯЗЫКОВ 


171 


теоремы Гёделя о полноте, баз Еп1зсЬеібип§зргоЫет рав¬ 
носильна проблеме распознавания доказуемости элемен¬ 
тарных предикатных формул (при подходящем понятии до¬ 
казуемости). В 1936 г. нерешаемость баз ЕпізЬеібип§зргоЬ- 
Іега была независимо установлена Чёрчем и Тьюрингом 
(см. [Чёрч, 1936а], [Чёрч, 19366], [Тьюринг, 1936], [Тью¬ 
ринг, 1937]). Аналогичные результаты имеют место и для 
реализуемостной семантики предикатных формул (см. § 2.2): 
невозможен ни алгоритм, распознающий реализуемость та¬ 
ких формул, ни алгоритм, распознающий их неопровержи¬ 
мость. Эти результаты следуют из теорем Плиско: 1) множест¬ 
во всех реализуемых предикатных формул не является 
арифметическим (см. [Плиско, 1973], [Плиско, 1977]); 
2) множество всех неопровержимых предикатных формул 
не является арифметическим (см. [Плиско, 19761, [Плиско, 
1978]). Относительно разрешимости и арифметичности мно¬ 
жества реализуемых и множества неопровержимых про¬ 
позициональных формул ничего не известно. 

Наряду с проблемой разрешения для множества истин¬ 
ных формул, представляющей собой проблему построения 
алгоритма, естественно ставить проблему порождения 
этого множества, представляющую собой проблему постро¬ 
ения исчисления: требуется построить исчисление, порож¬ 
дающее все истинные и только истинные формулы (в эк¬ 
вивалентных терминах: построить логистическую систему, 
в которой доказываются в точности такие формулы). Тео¬ 
рема Гёделя о полноте дает положительное решение этой 
проблемы для языка элементарной логики предикатов, а 
теорема Гёделя о неполноте — отрицательное решение 
этой проблемы для языка элементарной арифметики. Вклю¬ 
чение теоремы о неполноте в контекст понятий теоретиче¬ 
ского программирования осуществлено в [Глушков, 1979]. 

Теорему о неполноте можно воспринимать как чистую 
теорему несуществования. Однако уже доказательство (а в 
косвенной форме — даже формулировка) самого Гёделя в 
[Гёдель, 1931] содержит алгоритм, позволяющий по любому 
исчислению (логистической системе) указать отличие порож¬ 
даемого этим исчислением множества (т. е. множества всех 
формул, доказуемых в этой логистической системе) от множе¬ 
ства всех истинных формул арифметики, т. е. указать эле¬ 
мент одного из этих множеств, ие принадлежащий другому. 
Ясно, что этим свойством « эффективной гёделевостт (ср. 
[Успенский, 1974, § 10]) обладают в точности те языки, у 
которых множество всех истинных формул эффективно от- 
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лично (см. § 2.2) от всех перечислимых (т. е. породимых) 
подмножеств множества всех формул. 

Невозможность ввести для какого-либо языка адекват¬ 
ное, т. е. равнообъемное истинности, понятие доказуемости 
(а эта невозможность и составляет предмет теоремы о не¬ 
полноте для рассматриваемого языка) тесно связана с по¬ 
нятием неотделимости (два множества неотделимы, если 
они не являются отделимыми, см. §^2.1). Как подметили Кли- 
ни (см. ІКлйни, 1952, § 613) и Колмогоров (см. [Успенский, 
1953) или [Успенский, 1953а]), если имеются два неотдели¬ 
мых множества формул какого-либо языка, причем все 
формулы из первого множества истинны, а все формулы из 
второго множества ложны (в том смысле, что истинны их 
отрицания), то для рассматриваемого языка нельзя ввести 
непротиворечивую логистическую систему, являющуюся 
полной (т. е. такой, в которой все истинные формулы ока¬ 
зывались бы доказуемыми). 

Это обстоятельство позволяет получать еторемы неполно¬ 
ты, избегая рассмотрения сложно устроенного множества 
всех истинных формул (содержащего и такие формулы, уста¬ 
новление истинности которых встречает трудности), а огра¬ 
ничиваясь Построением какого-либо множества «заведомо 
истинных» формул и какого-либо множества «заведомо лож¬ 
ных» формул — так, чтобы эти два множества были срав¬ 
нительно просто устроены, но все же неотделимы. (Различ¬ 
ные варианты коиструктивизации понятия неотделимости — 
см. [Успенский, 1953], [Шмульян, 1958], [Щмульян, 1960], 
[Шмульян, 1961, гл. V, § 1 и 12], [Успенский, 1960, § 13] — 
естественно приводят к соответствующим вариантам эффек¬ 
тивной гёделевости.) Аппарат неотделимости может быть 
применен и для установления нерешаемости семантических 
проблем разрешения (см. [Трахтенброт, 1953]). 

Всю теорию доказательств можно рассматривать как 
ветбь прикладной теории алгоритмов и исчислений. И дело 
тут не только и не столько в результатах, сколько в исход¬ 
ных идейных предпосылках. Сами понятия формального до¬ 
казательства и доказуемой формулы, рассматриваемые во 
всей их общности, опираются на фундаментальные пред¬ 
ставления алгоритмического или исчислительного харак¬ 
тера. Здесь возможны два подхода (разумеется, эквивалент¬ 
ных), отдающие, соответственно, примат понятию исчис¬ 
ления или понятию алгоритма. 

Первый подход состоит в том, что понятие доказуемой 
формулы вводится непосредственно, без использования по- 
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нятия доказательства: формула называется доказуемой, 
если она порождается рассматриваемой логистической си¬ 
стемой. Доказательства вводятся потом как протоколы 
(записи) порождений. Что же касается самого понятия ло¬ 
гистической системы, как оно понимается, например, в 
[Чёрч, 1956, §07] или в [Минский, 1967, § 12.2], то трудно 
отличить это понятие от общего понятия исчисления — мож¬ 
но просто сказать, что логистические системы — это такие 
исчисления, которые ориентированы на получение формул 
в формализованных языках (и эта направленность отража¬ 
ется в сопутствующей терминологии). 

Второй подход состоит в том, что сперва вводится поня¬ 
тие доказательства, а затем через него определяется понятие 
доказуемой формулы. Основное, что требуется от доказа¬ 
тельства при таком подходе,— это чтобы существовал ал¬ 
горитм, отличающий доказательства от недоказательств, 
т. е. чтобы множество всех доказательств было разрешимым; 
это требование обосновано в [Чёрч, 1956, §07]. Рассматри¬ 
ваемый подход естественно приводит к понятию дедуктики 
(см. [Успенский, 1974, §3], [Успенский, 1982, § 1, п. 3.3]). 
Дедуктикой над алфавитом Б рассматриваемого языка на¬ 
зывается произвольная тройка <Д, П, 6), где Д — произ¬ 
вольный алфавит (алфавит доказательств), О — произволь¬ 
ное разрешимое множество слов в алфавите Д (множество 
всех доказательств) и б — такая вычислимая функция 
(функции выделения доказанного), которая определена на 
всяком элементе из й и значениями которой служат слова в 
алфавите Б. Те слова в Б, которые принадлежат множеству 
б ф), называются доказуемыми относительно данной де¬ 
дуктики. Понятие дедуктики может трактоваться как уточ¬ 
нение наиболее общего интуитивного представления о фор¬ 
мальном доказательстве. 

Заметим в заключение, что, как подчеркнуто в [Чёрч, 
1956, § 07], использование алгоритмических представле¬ 
ний требуется не только при введении понятия доказуемо¬ 
сти, но и на более ранних стадиях изучения формализо¬ 
ванных языков, в частности при определении понятия (пра¬ 
вильно построенной) формулы. 

§ 2.4. Вычислимый анализ 

2.4.0. Ранняя история: Борель и Тьюринг. Понятие 
вычислимого действительного числа и вычислимой функции 
действительного переменного восходят к статье Бореля 
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[Борель, 1912]; в этой же статье намечены и некоторые 
основные факты вычислимого анализа. Раздел II указанной 
статьи называется «Вычислимые числа» (І\ т отЪгез саІсиІаЬ- 
Іез) и начинается со следующего определения: «Мы скажем, 
что число а вычислимо, коль скоро для произвольного це¬ 
лого п можно получить рациональное число, которое отли¬ 
чается от а менее чем на Сделанное в этой формулировке 

примечание о «достоверном и недвусмысленном методе» по¬ 
лучения (оно процитировано нами в § 1.1) не оставляет сом¬ 
нений, что Борель имел в виду самую общую концепцию 
алгоритмической вычислимости. Сейчас мы бы сказали: 
«Действительное число а вычислимо, коль скоро существу¬ 
ет алгоритм, дающий по всякому целому положительному п 

рациональное приближение к а с точностью до -І-». 

Далее Борель указывает, что если два вычислимых чис¬ 
ла не равны, то их неравенство может быть рано или поздно 
обнаружено путем подбора достаточно близких рациональ¬ 
ных приближений (хотя точность, с которой необходимо 
брать такие приближения, и не может быть предвидена за¬ 
ранее); если же два вычислимых числа равны, то попытка 
обнаружить их равенство может натолкнуться на неразре¬ 
шимые трудности (йіШсиІІёз іпзоІиЫез). Современная фор¬ 
мулировка: «Каково бы ни было конструктивное действи¬ 
тельное число у, невозможен алгоритм, указывающий для 
любого конструктивного действительного числа х верный 
член дизъюнкции (х=у)\/(хФу)» ([Кушнер, 1973, гл. 4, 
§ 1, теорема 31). 

Раздел III статьи Бореля называется «Вычислимые 
функции и функции с асимптотическим определением» 
(Без Іопсііопз саІсиІаЫез еі Іез Іопсііопз а дёПпШоп азутр- 
ІоІЦие). Буквальная формулировка гласит: «Функция вы¬ 
числима, коль скоро ее значение вычислимо для каждого 
значения аргумента». Однако в последующих комментариях 
Борель, по существу, требует наличия алгоритма, позволяю¬ 
щего по а и п вычислить / (а) с точностью —, поясняя при 

этом, что «задать вычислимое число а — это просто задать 
метод получения а с произвольной точностью». 

Современное определение вычислимой функции вычис¬ 
лимого действительного переменного (см. ниже) может по¬ 
этому трактоваться как уточнение определения Бореля. 
(Правильнее было бы сказать, впрочем, что одновременно с 
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уточнением происходит и ограничение области определения: 
«современные» вычислимые функции рассматриваются лишь 
на вычислимых действительных числах.) Борель формули¬ 
рует и утверждение о непрерывности вычислимой функции 
(доказтельство этого утверждения было найдено лишь в 
1956 г. Цейтиным, см. ниже). Он пишет: «Функция не может 
быть вычислимой, если она не является непрерывной, по 
крайней мере для вычислимых значений аргумента». «Более 
того,— указывает Борель, — нужно предполагать извест¬ 
ной меру непрерывности функции, то есть инфинитезималь¬ 
ный порядок (в обобщенном смысле) изменения функции в 
сравнении с изменением аргумента». Если понимать эту 
«меру непрерывности» как вычислимый регулятор непрерыв¬ 
ности (см. ниже), можно заключить, что Борель имел в виду 
не просто непрерывность, но вычислимую непрерывность. 

Систематическое развитие вычислимого анализа на ос¬ 
нове точных алгоритмических представлений началось со 
статьей Тьюринга ([Тьюринг, 1936], [Тьюринг, 1937]). Ис¬ 
тория этого развития прослежена в [Кушнер, 1973, введе¬ 
ние, п. 2]. 

2.4.1. Конструктивный анализ. Публикации в обсуж¬ 
даемой области можно отнести к одному из двух направле¬ 
ний. За первым из них мы сохраняем название «вычислимый 
анализъ >, второе обычно называется «конструктивный ана¬ 
лиз». Объекты, изучаемые в первом направлении, носят 
названия «вычислимые числа», «вычислимые функции» и 
т. п.; объекты второго направления называются «конструк¬ 
тивные числа», «конструктивные функции» и т. п.; к сожа¬ 
лению, это разделение терминологии не всегда соблюда¬ 
ется. 

Различие между направлениями состоит в следующем. 
Вычислимый анализ выделяет среди традиционных объек¬ 
тов анализа — чисел и функций — вычислимые, т. е. свя¬ 
занные определенным образом с алгоритмами. Конструк¬ 
тивный анализ рассматривает вычислимые числа и функции 
не как часть более обширной совокупности всех чисел и 
функций, а сами по себе. Более того, понятие программы 
числа или функции является для него исходным: конструк¬ 
тивным числом называется то, что в вычислимом анализе 
называется программой вычислимого числа, а конструктив¬ 
ной функцией — то, что в вычислимом анализе называется 
программой вычислимой функции; на конструктивных 
числах и конструктивных функциях затем вводится отно¬ 
шение равенства, означающее, разумеется, не совпадение 
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соответствующих конструктивных объектов, а совпадение 
задаваемых ими чисел и функций. 

Такой способ изложения позволяет говорить непосред¬ 
ственно об алгоритмах над конструктивными числами и 
конструктивными функциями. Ясно, что понятия и резуль¬ 
таты вычислимого анализа и конструктивного анализа без 
труда переводятся друг в друга. Следует, однако, отметить, 
что в содержание понятия «конструктивный анализ», как 
правило, вкладывается еще и требование использовать толь¬ 
ко конструктивную логику (см. [Кушнер, 1979а]). 

2.4.2. Начальные понятия. Начальные понятия вычис¬ 
лимого анализа таковы. 

1. Вычислимая последовательность рациональных чисел ; 
это понятие не нуждается в комментариях. 

2. Вычислимо сходящаяся (или вычислимо фундаменталь¬ 
ная) последовательность. Это последовательность, обладаю¬ 
щая вычислимым регулятором фундаментальности. Регуля¬ 
тором фундаментальности (или регулятором сходимости в 
себе) для последовательности {а„} называется такое отобра¬ 
жение к множества 0+ в N. что \а р —а 9 \<.ъ при любых р 
и < 7 , больших к(г). Согласно [Марков, 1954а], [Марков, 
1958г], последовательность называется регулярно сходя¬ 
щейся, если для любых тип, таких что т^п, соблюдается 
условие \а т — а п |<2~“. Очевидно, каждая вычислимая 
вычислимо сходящаяся последовательность обладает вы¬ 
числимой же регулярно сходящейся подпоследователь¬ 
ностью. 

3. Вычислимое действительное число. Существует не¬ 
сколько эквивалентных определений этого понятия: 

1) определение Бореля, уточненное с помощью понятия 
алгоритма (см. выше); 

2) определения Тьюринга из [Тьюринг, 1936], [Тьюринг, 
1937] — первые определения, использующие какую бы то, 
ни было вычислительную модель (да и вообще первые стро¬ 
гие, в математическом смысле, определения); 

3) определение Шпекера из [Щпекер, 1949]: действитель¬ 
ное число вычислимо, если оно есть предел вычислимой и 
вычислимо сходящейся последовательности рациональных 
чисел; 

4) определение Маркова из [Марков, 1954а], [Марков, 
1958г], переложенное в терминах вычислимого анализа: 
действительное число вычислимо, если оно есть предел вы¬ 
числимой регулярно сходящейся последовательности ра¬ 
циональных чисел; 
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5) определение «по Дедекинду»: а вычислимо, если каж¬ 
дое из множеств {г ^ 0|г<а} и {г ^ 0|г>а} перечислимб. 

Множество всех вычислимых действительных чисел на¬ 
зывается вычислимым континуумом. 

4. Программа вычислимого действительного числа. Опре¬ 
деление этого понятия может быть легко получено на основе 
любого из перечисленных определений вычислимого числа. 
Например, определение Бореля приводит к такому опре¬ 
делению программы! программой числа а называется про¬ 
грамма алгоритма, который по всякому е € 0 + дает рацио¬ 
нальное 8-приближение к а. Нужно иметь в виду, что одно 
из определений Тьюринга, связанное с разложением числа 
в бесконечную десятичную дробь (это определение требует, 
чтобы последовательность десятичных знаков была вычис¬ 
лима), приводит к «дурному» способу программирования, 
не эквивалентному способам, возникающим из других опре¬ 
делений, и потому этот способ мы не будем рассматривать. 
Все остальные способы, возникающие на осйове приведен¬ 
ных выше определений, одинаково хороши, и переход от 
программы числа при одном способе к программе того же 
числа при другом способе осуществляется алгоритмически 
(иными словами, возникающие нумерации вычислимых дей¬ 
ствительных чисел их программами эквивалентны в смысле 
§1.15). Сейчас мы изложим более подробно определение 
программы, отправляясь от определения вычислимого чис¬ 
ла по Шпекеру. Фиксируем какие-либо две представитель¬ 
ные вычислительные модели, осуществляющие соответст¬ 
венно вычисления функций из N в О и из О в N. и соот¬ 
ветствующие способы программирования (см. § 1.15). Сле¬ 
дуя Шанину (см. [Шанин, 1956], [Шанин, 1962]), назовем 
вещественным дуплексом; или просто дуплексом, всякую па¬ 
ру (Ри Ра), в которой Рі есть программа некоторой последо¬ 
вательности рациональных чисел, а р а есть программа не¬ 
которого регулятора сходимости в себе этой последователь¬ 
ности. Всякий дуплекс, таким образом, задает некоторую 
вычислимую и вычислимо сходящуюся последовательность 
рациональных чисел и, следовательно, вычислимое действи¬ 
тельное число, являющееся пределом этой последовательно¬ 
сти; рассматриваемый дуплекс называется программой 
этого числа. Было бы неправильно называть программой 
числа только первый член дуплекса, поскольку этот первый 
член еще не несет информации, позволяющей вычислять 
число с произвольной точностью. Действительно, невоз¬ 
можен алгоритм, дающий по произвольной программе про- 
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невольной вычислимой последовательности, которая вычис¬ 
лимо сходится, программу какого-либо регулятора сходи¬ 
мости в себе этой последовательности (см. [Дейтин, 1962а, 
§ 3, следствие 3], [Кушнер, 1973, гл. 4, §2, теорема 2]). 
Отображение, относящее всякому дуплексу задаваемое 
им вычислимое действительное число, служит примером 
нумерации (при широком понимании, см. § 1.15) множества 
всех вычислимых действительных чисел. Основание этой 
нумерации — множество /всех вещественных дуплексов — 
называется конструктивным континуумом-, оио непере¬ 
числимо; более того, для любого перечислимого множества 
дуплексов можно указать вычислимое действительное число, 
не имеющее программы в этом множестве (см. [Кушнер, 
1973, гл. 3, §4], (Успенский, 1960, § 12, теорема 11]). При 
замене одной пары представительных моделей на другую 
переход от программы вычислимого действительного числа 
относительно исходной пары к программе того же числа от¬ 
носительно новой пары осуществляется алгоритмически: 
это вытекает из возможности трансляции, о которой гово¬ 
рилось в § 1.14. 

5. Вычислимая функция вычислимого действительного 
переменного. Для простоты ограничимся функциями одного 
переменного. Излагаемое определение есть несущественное 
изменение определения Маркова из [Марков, 1958г] (у Мар¬ 
кова — «конструктивная функция вещественной перемен¬ 
ной»). Прежде всего фиксируем некоторое понятие програм¬ 
мы вычислимого числа, например, в виде дуплекса. Функ¬ 
ция из вычислимого континуума в вычислимый континуум 
называется вычислимой, коль скоро существует алгоритм, 
который: 1) дает по всякой программе аргумента програм¬ 
му соответствующего значения функции и 2) не дает ника¬ 
кого результата для любой программы вычислимого дейст¬ 
вительного числа, не принадлежащего области определения 
функции. 

Дальнейшие понятия связаны с дифференцированием и 
интегрированием вычислимых функций вычислимого дейст¬ 
вительного переменного (см. [Кушнер, 1973, гл. 6, 71). 

2.4.3. Главные результаты. Среди результатов вычис¬ 
лимого анализа наиболее замечательными являются сле¬ 
дующие два. 

1. Пример Шпекера ([см. Шпекер, 1949]) монотонной ог¬ 
раниченной вычислимой последовательности рациональных 
чисел, не сходящейся ни к какому вычислимому числу. 
Построение Шпекера было впоследствии значительно упро- 
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щено Райсом (см. [Райс, 1954], [Успенский, 1960, § 12, п. 3], 
[Мартин-Лёф, 1970, §16], [Кушнер, 1973, гл. 3, §3]). 

2. Теорема Бореля — Цейтина (см. [Борель, 1912, 
разд. III], [Цейтин, 1959], [Цейтин, 1962, гл. V, теорема 3]) 
о непрерывности и даже вычислимой непрерывности вы¬ 
числимой функции вычислимого действительного перемен¬ 
ного. Пусть / — функция действительного переменного с 
областью определения Е и х 0 € Е. Функция к, отображающая 
0 + в 0 + , называется регулятором непрерывности функ¬ 
ции / в точке * 0 . если 

(Ѵе € 0 + ) (Ѵх б Е) [| х—х 0 1 < к (е) =$► | / (х)—[(х 0 ) | < е]. 

Непрерывность / в точке х 6 , очевидно, равносильна нали¬ 
чию регулятора непрерывности в х 0 \ вычислимая непрерыв¬ 
ность / в х 0 по определению означает наличие вычислимого 
регулятора. Теорема Бореля — Дейтина утверждает, что 
всякая вычислимая функция вычислимого действительного 
переменного вычислимо непрерывна в каждой точке х„ 
своей области определения; более того, для заданной / про¬ 
грамма регулятора может быть алгоритмически найдена 
по программе числа х 0 (см. [Кушнер, 1973, гл. 5, §2, теоре¬ 
ма 21). 

2.4.4. Эффективно метрические пространства. Известно, 
что многие понятия и результаты традиционного анализа 
переносятся с действительной прямой на метрические про¬ 
странства. Аналогичное развитие имеет место и в вычисли¬ 
мом анализе. Так, теорема Бореля — Дейтина является 
частным случаем более общей теоремы Цейтина — Мос- 
ковакиса (см. [Кушнер, 1973, гл. 9, §2, теорема Ш) о не¬ 
прерывности всякого вычислимого частичного отображе¬ 
ния из одного эффективно метрического пространства в 
другое (при соблюдении некоторых условий, налагаемых 
на первое пространство, см. ниже). К понятию эффективно 
метрического пространства мы сейчас и перейдем. 

Эффективно метрическое пространство (см. [Ногина, 
1966], [Ногина, 1978, гл. II]) — это метрическое прост¬ 
ранство, рассматриваемое вместе с некоторой своей нуме¬ 
рацией, причем требуется, чтобы расстояние между любы¬ 
ми двумя точками этого пространства было вычислимым 
действительным числом и чтобы существовал алгоритм, 
дающий программу этого числа по номерам точек. Это поня¬ 
тие, по существу, эквивалентно понятию конструктивного 
метрического пространства, введенному Шаниным (см. 
[Шанин, 1962, § 9], а также [Цейтин, 1959], [Цейтин, 196211. 
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й понятию рекурсивного метрического пространства, вве¬ 
денному Московакисом (см. [Московакис, 1964]); послед¬ 
ние два понятия различаются между собой лишь техниче¬ 
скими деталями. Упоминавшаяся выше теорема Цейтина — 
Московакиса была доказана Цейтиным и соответственно 
Московакисом именно для конструктивных и соответствен¬ 
но рекурсивных пространств. 

Рекурсивное пространство Московакиса (как и конст¬ 
руктивное пространство' Шанина) состоит из конструктив¬ 
ных объектов с заданным из них отношением эквивалентнос¬ 
ти. Оно превращается в эффективно метрическое прост¬ 
ранство, едли склеить эквивалентные объекты так, что точ¬ 
ками нового пространства объявляются классы эквивалент¬ 
ности, а каждый из исходных конструктивных объектов 
объявляется номером содержащего этот объект класса. Вы¬ 
числимый континуум с нумерацией чисел, задаваемой их 
программами, служит примером эффективно метрического 
пространства, а конструктивный континуум — примером 
конструктивного метрического пространства. Другой при¬ 
мер; эффективно метрическое пространство всех вычисли¬ 
мых последовательностей натуральных чисел с бэровской 
метрикой (соответственно конструктивное метрическое про¬ 
странство программ таких последовательностей). 

Проиллюстрируем на примере теоремы Цейтина ‘— Мос¬ 
ковакиса некоторые характеристики эффективно метриче¬ 
ских пространств. Условия, требуемые этой теоремой и 
обеспечивающие непрерывность, состоят в том, чтобы про¬ 
странство, иа котором задано частичное отображение, было 
1) эффективно сепарабельным и 2) эффективно почти пол¬ 
ным. Эффективная сепарабельность (согласно [Ногина, 
1978, гл. II], у Московакиса — рекурсивная сепарабельность, 
у Шанина, Цейтина, Кушнера — просто сепарабельность ) 
означает наличие перечислимого плотного подмножества. 
Эффективная почти полнота (у Кушнера — слабая пол¬ 
нота, у Московакиса — условие (А)) означает наличие ал¬ 
горитма, который по программе вычислимой последователь¬ 
ности точек пространства и по программе вычислимого ре¬ 
гулятора фундаментальности этой последовательности да¬ 
ет программу предела последовательности в случае, если 
таковой существует. Оба приведенных выше примера про¬ 
странств являются и эффективно сепарабельными, и эф¬ 
фективно почти полными. 

2.4.5. Эффективно топологические пространства. Даль¬ 
нейшим обобщением является понятие эффективно тополо • 
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гического пространства, введенное и изученное Ногиной 
(см. [Ногина, 1966], [Ногина, 1969], [Ногина, 1978, гл. III]). 
Эффективно топологическое пространство — это топологи¬ 
ческое пространство, рассматриваемое вместе с двумя нуме¬ 
рациями, первая из которых нумерует само пространство, 
а вторая — его (топологическую) базу, так что и простран¬ 
ство, и база предполагаются счетными; требуется, чтобы су¬ 
ществовал алгоритм, который по номерам двух элементов 
базы А ѵі В ѵі номеру точки х € А П В дает номер такого эле¬ 
мента базы С, что х$СсА Г\В. Для эффективно топологи¬ 
ческих пространств вводятся естественные эффективные 
аналоги аксиом отделимости в смысле Хаусдорфа (см. ([Но¬ 
гина, 1978, гл. IV]); в каждом таком аналоге требуется на¬ 
личие алгоритма, дающего номера отделяющих окрестнос¬ 
тей. Одним из основных результатов является получение 
условий, необходимых и достаточных для того, чтобы эффек¬ 
тивно топологическое пространство было эффективно мет- 
ризуемым, т. е. эффективно гомеоморфным эффективно мет¬ 
рическому пространству (см. [Ногина, 1966], [Ногнна, 
1978, гл. V]). Другой результат состоит в перенесении на 
эффективно топологические пространства теоремы Цей- 
тина — Московакиса (см. [Вайнберг, Ногина, І976]). 

2.4.6. Отчасти вычислимый анализ. Наряду с вычисли¬ 
мым анализом в строгом смысле возможен и, так сказать, 
«отчасти.вычислимый» анализ. Этот термин мы прилагаем 
к алгоритмическим конструкциям, характеризующим мно¬ 
жества обычных действительных чисел. Так, среди откры¬ 
тых множеств действительной прямой можно выделить 
эффективно открытые множества, множество называется 
эффективно (конструктивно, рекурсивно) открытым, если 
оно есть объединение перечислимой системы интервалов с 
рациональными концами. Подобная «эффективизация» мо¬ 
жет быть произведена для самых различных типов мно¬ 
жеств: для борелевских множеств (см. [Мартин-Лёф, 
1970, § 30]), для проективных множеств (см. [Роджерс, 
1967, упр. 15—8]) н т. д. (популярное изложение см. [Ус¬ 
пенский, 1985, § 2, п. 9, и § 3, п. 7]). 

К сфере отчасти вычислимого анализа относится и ис¬ 
следование обычных функций действительного переменно¬ 
го, обладающих теми илн иными алгоритмическими свойст¬ 
вами типа вычислимой аппроксимируемости (см. [Шпекер, 
1&49], [Клауа, 1961, §7]) или вычислимой непрерывности 
(см. [Клауа, 1961, §8]). Нередко для таких функций, о 
действительными аргументами и значениями, также упот-^ 
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ребляют термин «вычислимые функции». Разумеется, вы¬ 
числимые функции отчасти вычислимого анализа не есть 
вычислимые функции в смысле § 1.7. Они отличны и от 
вычислимых функций вычислимого анализа, описанных в 
п. 2.4.3, поскольку могут быть определены не только в 
вычислимых точках. Систематическое изучение таких функ¬ 
ций началось с 1955 г., с работ Гжегорчика и Лакомба (см. 
[Гжегорчик, 1955], [Гжегорчик, 1957], [Лакомб, 1955]). Вот, 
например, одно из возможных определений вычислимой 
функции, отображающей отрезок / в К: функция / вычис¬ 
лима, коль скоро существуют такие вычислимые (в смысле 
§1.7) функции <р: ЬіхО->-СЗ и ф: что для всех 

/г € N. г6О, х € К выполняется импликация 

\х—г \< 1/ф(/і)=Н/(х) — <р(п, г)| < 10 -п 

(см. [Пур-Эл, Ричардс, 1983, п. 1]). А вот типичный ре¬ 
зультат этой теории (см. там же, п. 2): если вычислимая 
функция на [а, Ы принадлежит классу С 2 , ее первая произ¬ 
водная также вычислима (при том, что принадлежность к 
С 1 недостаточна для вычислимости производной). 

Разумеется, «отчасти вычислимый анализ» не ограничи¬ 
вается действительной прямой. Понятия эффективно от¬ 
крытого, эффективно-О б и т. п. множеств осмысленны для 
любого топологического пространства с нумерованной ба¬ 
зой. В [Кузнецов, Трахтенброт, 1955] эти понятия, в при¬ 
менении к пространству Бэра, используются для исследо¬ 
вания вычислимых (частичнорекурсивных) операторов (см. 
также [Успенский, 1957, §11]). 

2.4.7. Эффективно пренебрежимые множества. Займемся 
теперь эффектнвизацией понятия множества действитель¬ 
ных чисел, имеющего меру нуль. Такие множества назы¬ 
ваются также пренебрежимыми. Среди всевозможных пре- 
небрежимых множеств выделяются эффективно (конструк¬ 
тивно, рекурсивно) пренебрежимые множества как мно¬ 
жества эффективно нулевой мерыз множество эффективно 
пренебрежимо, если можно эффективно указать содержа¬ 
щее его эффективно открытое множество сколь угодно ма¬ 
лой меры. Более точно, множество называется эффективно 
пренебрежимым, если существует алгоритм, который по 
каждому ебСЗ + дает программу покрывающей множество 
перечислимой системы интервалов о рациональными кон¬ 
цами, сумма длин которых меньше е; заметим, что эта сум¬ 
ма, в силу примера Шпекера, может и не быть вычислимым 
числом. 
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Как объявлено в [Заславский, Цейтин, 1956] и доказано 
в [Заславский, Цейтин, 1962], вычислимый континуум яв¬ 
ляется эффективно пренебрежимым множеством. 

Основной результат в этой области — теорема Мартин- 
Лёфа (см, [Мартин-Лёф, 1966а], [Мартин-Лёф, 1970, §35]): 
существует эффективно пренебрежимое множество, являю¬ 
щееся наибольшим, т. е. содержащее в качестве подмноже¬ 
ства любое эффективно пренебрежимое множество. (Отсюда 
немедленно вытекает упомянутая эффективная пренебре- 
жимость вычислимого континуума: в самом деле, каждое 
одноэлементное множество, состоящее из вычислимого дей¬ 
ствительного числа, эффективно пренебрежимо, а значит, и 
объединение всех таких множеств содержится в наиболь¬ 
шем эффективно пренебрежимом множестве.) Дополнение 
к наибольшему множеству эффективно нулевой меры — мно¬ 
жество эффективно .полной меры — называется, согласно 
[Мартин-Леф, 1970, § 35], конструктивным носителем меры. 

Теорема Мартин-Лёфа и предложенное ее автором дока¬ 
зательство сохраняют силу в общей ситуации, которую мы 
сейчас опишем. 

Сперва дадим два определения. 

1. Пусть М — занумерованное множество с нумерацией 
а и основанием нумерации Е, пусть р — функция из М в 
вычислимый континуум; р называется вычислимой, коль 
скоро существует алгоритм, дающий по всякому п б Е про¬ 
грамму числа р (а (п)) (ср. с определением вычислимой функ¬ 
ции вычислимого действительного переменного и с опреде¬ 
лением расстояния в эффективно метрическом пространстве). 

2. Пусть а — натуральная нумерация системы мно¬ 
жеств М и пусть р — определенная на М вещественно¬ 
значная функция; множество А называется эффективно 
пренебрежимым, если существует алгоритм, который для 
каждого е ^ 0 + дает программу такого породимого множе¬ 
ства /СсМ, что семейство множеств {а(к)\к$ К} образует 

покрытие для А и < е - 

, Общая формулировка теоремы Мартин-Лёфа. Пусть 
М — счетная система множеств с натуральной нумерацией 
а и пусть р — вычислимая функция из М в вычислимый 
континуум, всюду определенная на М. Тогда существует 
наибольшее (по включению) эффективно пренебрежимое 
множество. (В обычных применениях теоремы М — счетное 
полукольцо множеств в смысле [Колмогоров, Фомин, 1976, 
гл. 1, § 5], а р является мерой на этом полукольце.) 
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§ 2.5. Нумерованные структуры 

2.5.0. Нумерованная структура — это математическая 
структура (в широком смысле, как у Бурбаки), рассматри¬ 
ваемая вместе с нумерацией (см. § 1.15) одного из состав¬ 
ляющих множеств или с нумерациями нескольких таких 
множеств. Пример: эффективно топологическое пространство 
(см. § 2.4) является нумерованным топологическим про¬ 
странством, поскольку имеет нумерацию множества своих 
точек и нумерацию топологической базы. 

Интерес к нумерованным структурам вызван желанием 
дать (конструктивные) имена рассматриваемым (не конст¬ 
руктивным) объектам. Для примера рассмотрим ординалы и 
системы обозначений для них. В качестве таковых систем 
мы, следуя Клини ([см. Роджерс, 1967, § 11.7]), будем рас¬ 
сматривать нумерации множеств ординалов, обладающие не¬ 
которыми естественными свойствами. Именно, системой 
обозначений называется нумерация некоторого начального 
отрезка ординалов, обладающая следующими свойствами: 

1) Существует алгоритм, определяющий по всякому но¬ 
меру ординала, какой из трех следующих случаев имеет ме¬ 
сто: ординал равен нулю, имеет предшественника, является 
предельным; 

2) существует алгоритм, который по номеру всякого ор¬ 
динала, имеющего предшественника, указывает один из но¬ 
меров этого предшественника; 

3) существует алгоритм, который по номеру всякого 
предельного ординала дает программу такой последователь¬ 
ности номеров ординалов, что последовательность ординалов 
с этими номерами возрастает и сходится к нашему предель¬ 
ному ординалу. 

Самая простая система обозначений — тождественная 
нумерация натуральных чисел (рассматриваемых как орди¬ 
налы). Чуть более сложный пример системы обозначений — 
нумерация всех ординалов, представимых как значение по¬ 
линома с натуральными коэффициентами от со, этими самы¬ 
ми полиномами. 

Введя понятие системы обозначений, мы получаем воз¬ 
можность ввести понятие конструктивного ординала — та¬ 
кого ординала, который имеет номер хотя бы в одной систе¬ 
ме обозначений. Мы видим, как теория нумераций позво¬ 
ляет дать определение важного и естественного класса орди¬ 
налов. 

Как доказал Клини (см. [Роджерс, 1967, § 11.7]), сущест- 
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вует максимальная система обозначений, то есть такая си¬ 
стема обозначений, в которой каждый конструктивный орди¬ 
нал имеет номер. (Имеется и другое описание конструктив¬ 
ных ординалов: ординал конструктивен тогда и только 
тогда, когда он является порядковым числом некоторого 
разрешимого порядка — см. [Роджерс, 1967, §11.81.) 

Особенностью класса конструктивных ординалов как 
нумерованного множества является то, что исторически 
первое определение этого класса фактически использовало 
общее понятие нумерации (в - то время как, например, ал¬ 
гебраические числа, о которых будет идти речь дальше, по¬ 
явились, разумеется, безо всякой связи с нумерациями и 
вообще теорией алгоритмов). Именно рассмотрение этого 
класса побудило Колмогорова сформулировать общие опре¬ 
деления числовой нумерации и сводимости нумёраций (см. 
§ 1.15). 

Рассмотрим теперь некоторые другие естественно возни¬ 
кающие нумерованные структуры. Например, у множества 
Сот(Х, У) (см. § 1.14) имеются нумерации, возникающие из 
способов программирования. Другой пример: стандартная 
нумерация элементов какой-либо конечнозаданной алгебры 
(например, группы) посредством термов (см. § 1.15). В этих 
двух примерах мы встречаемся с нумерациями программного 
типа и структурами с позитивными операционно-вычисли¬ 
мыми нумерациями. 

2.5.1. Нумерации программного типа. Нумерация про¬ 
граммного типа — это нумерация, которую можно полу¬ 
чить из способов программирования с помощью тех опера¬ 
ций, которые были описаны в конце § 1.15, а именно: 
1) прямого произведения, 2) кортежного распространения, 
3) сужения и 4) факторизации. Напомним (см. § 1.15), что 
каждый способ программирования вычислимых функций из 
X в V можно рассматривать как нумерацию семейства 
Сот(Х, К), а каждый способ программирования породимых 
подмножеств П7 — как нумерацию семейства Оеп(І^); здесь 
X, У, '№ — некоторые ансамбли. Типичный пример нумера¬ 
ции программного типа — нумерация вычислимого конти¬ 
нуума посредством дуплексов (см. §2.4). 

Известно, что невозможен алгоритм, который по двум 
программам устанавливал бы, являются ли они программа¬ 
ми одной и той же вычислимой функции. Поэтому если а — 
нумерация программного типа, то (за исключением триви¬ 
альных вырожденных случаев) не существует алгоритма, 
который по' произвольным элементам тип основания ну- 
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мерации распознает, имеет ли место рав§нствр а(т)—а(п): 
нумерация а оказывается неразрешимой в смысле § 1.15. 
Более того, если в построении нумерации участвует суже¬ 
ние, основание нумерации оказывается (в невырожденных 
случаях) неразрешимым, а скорее всего — и неперечисли¬ 
мым: неперечислимо, например, множество всех программ 
всюду определенных функций из X в V. 

2.5.2. Квазистандартные нумерации. Пример нумерации 
другого, нежели программный, типа — это стандартная 
нумерация элементов произвольной конечнопорожденной 
алгебры (см. § 1.15). Все участвующие в сигнатуре опера¬ 
ции, очевидно, оказываются вычислимыми (см. § 1.15) от¬ 
носительно этой нумерации. Если алгебраическая система 
не только конечно порождена, но и конечно задана, то, как 
мы знаем (см. § 1.15), стандартная нумерация ее элементов 
термами позитивна (но разрешима только при наличии ре¬ 
шения у проблемы распознавания равенства!). Этот важ¬ 
ный алгебраический пример показывает роль позитивных 
нумераций с разрешимыми основаниями и вычислимыми 
сигнатурными операциями. По-видимому, именно на такие 
нумерации должно быть обращено главное внимание при 
изучении нумерованных алгебр. (Заметим, что такая нуме¬ 
рация может и не быть конструктивизацией, см. ниже.) 
Поэтому они заслуживают того, чтобы дать им какое-ни¬ 
будь специальное название; авторы, однако, не смогли при¬ 
думать хорошего названия, удовлетворяющего требова¬ 
ниям из [Мальцев, 1966, с. 72] и [Ершов А., 1977, с. 76]. 
Может быть, называть эти нумерации квазистандартными ? 

Вот еще пример алгебраической структуры, имеющей 
некоторую естественную нумерацию, оказывающуюся 
«квазистандартной». Это множество алгебраических ве¬ 
щественных чисел, занумерованное о помощью полиномов 
с целыми коэффициентами. Отношения равенства и порядка 
оказываются разрешимыми, а операции сложения и умно¬ 
жения —г вычислимыми относительно этой нумерации. Мы не 
входим в технические детали построения нумерации алгеб¬ 
раических чисел с такими свойствами; ограничимся указа¬ 
нием на то, что, по существу, именно такая нумерация опи¬ 
сывается в обычных доказательствах счетности множеств 
алгебраических чисел. 

2.5.3. Конструктивизации. Изложенный пример под¬ 
водит нас к понятию нумерованной и, далее, конструктив¬ 
ной алгебраической системы. Теория нумерованных и, 
прежде всего, конструктивных алгебраических систем была 
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основана Мальцевым н развита Ю, Л. Ершовым (см. [Маль¬ 
цев, 1961}, [Ершов ІО., 1973), [Ершов Ю., 1974], [Ер ? 
шов Ю., 1980], [Гончаров, 1979]). 

Пусть задана сигнатура {=, Р іг Р* .. /і, / а , . . 

где =, Рі, Р .суть предикатные символы, /у, / 2 , . . . — 

функциональные символы. Естественно рассматривать таг- 
кие сигнатуры, для которых валентность 1 ) символов Р ( 
и эффективно находится по і. Для таких сигнатур мно¬ 
жество всех формул логического языка (скажем, первого по¬ 
рядка), естественно расположенное в подходящем словар¬ 
ном ансамбле, разрешимо. 

Итак, пусть о — сигнатура описанного типа. Пусть, 
далее, 9Н=(Л1, о) — алгебраическая система (а. система). 
Пара (ШІ, ѵ), где ѵ — натуральная нумерация множест¬ 
ва М, называется нумерованной а. системой. Обозначим 
через а' сигнатуру, получаемую добавлением к а сим¬ 
волов констант с», сі, . . . Будем считать, что значением (ин¬ 
терпретацией) константы С( является ѵ (і) для всех і € N. 
Назовем нумерованную а. систему (5Й, ѵ) конструктив¬ 
ной а. системой (или рекурсивной а. системой); если мно¬ 
жество бескванторных предложений сигнатуры о', истин¬ 
ных в а. системе (М, а'), разрешимо, нумерация ѵ назы¬ 
вается в этом случае конструктивной нумерацией (см. 
[Мальцев, 1962а]) или конструктивиэацией алгебраичес¬ 
кой системы 9К. В случае конечной сигнатуры нумерация 
тогда и только тогда является конструктивиэацией, когда 
все сигнатурные функции вычислимы, а все сигнатурные 
предикаты, включая предикат равенства, разрешимы от¬ 
носительно этой нумерации (в смысле, разъясненном в кон¬ 
це § 1.15). Алгебраическая система называется конструкти- 
визируемой, если у нее существует конструктивизация. 
Для случая алгебр понятие (но не термин) конструктивизи- 
руемой алгебраической системы впервые появилось в работе 
Кузнецова (у Кузнецова — «общерекурсивная алгебра», 
см. [Яновская, 1959, с. 79]). Если теперь говорить Не о 
бескванторных предложениях, а о любых предложениях 
(языка первого порядка) сигнатуры а', то получится опре¬ 
деление сильно конструктивной алгебраической системы, 
сильной конструктивизации и сильной конструктивизи- 
руемости. 

*) Мы приписываем символу валентность п, если он обозначает 
предикат или функцию от п аргументов. (Термин «валентность» ка¬ 
жется предпочтительнее режущих глаз и ухо терминов «арность» или 
«местность».) 
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Ясно, что сильная конструктивизируемооть а. системы 
влечет разрешимость элементарной теории этой алгебраи¬ 
ческой системы. Обратное, вообще говоря, неверно: эле¬ 
ментарная теория сложения на нестандартном натуральном 
ряду разрешима, но соответствующая алгебраическая сис¬ 
тема не только не является сильно конструктивизируемой, 
нб даже не конструктивизируема в силу полученного в 
[Тверской, 1982] усиления теоремы Тенненбаума (см. ко¬ 
нец данного параграфа). 

Очевидно, каждая конструктивизация является разре¬ 
шимой нумерацией. Для алгебр о конечной сигнатурой 
конструктивность натуральной нумерации равносильна 
выполнению двух требований! требования вычислимости 
сигнатурных операций (относительно нумерации) и требова¬ 
ния разрешимости нумерации. Известно (см. § 1.15), что 
каждая разрешимая натуральная нумерация бесконечного 
множества эквивалентна некоторой однозначной натураль¬ 
ной нумерации. Поэтому если бесконечная алгебраическая 
система вообще допускает конструктивизацию, то она до¬ 
пускает и конструктивизацию, являющуюся однозначной 
нумерацией. 

В случае конечнопорожденной алгебраической системы 
естественно рассмотреть ее стандартную нумерацию (см. 
§1.15). Конструктивна ли стандартная нумерация? Не обяза¬ 
тельно: уже отношение равенства'может оказаться неразре¬ 
шимым. Именно ввиду такой возможности обсуждавшаяся 
выше в §2.( алгоритмическая проблема распознавания ра¬ 
венства элементов структуры может оказаться нерешимой. 
Однако если структура конструктивизируема, то стандарт¬ 
ная нумерация конструктивна. Для конечнопорожденных 
алгебр разрешимость стандартной нумерации равносильна ее 
конструктивности и, следовательно, равносильна конструк- 
тивизируемости рассматриваемой алгебры. (Впервые это об¬ 
стоятельство отметил Кузнецов, см. [Яновская, 1959, с. 79].) 

Всевозможные конструктивизации данной алгебраиче¬ 
ской системы образуют верхнюю полурешетку относительно 
колмогоровской сводимости; в случае, если алгебраическая 
система конечно порождена, а указанная полурешетка не¬ 
пуста," в этой полурешетке есть наименьший элемент — это 
стандартная нумерация. (Разумеется, педантичнее было бы 
говорить не о самих конструктивизациях, а о классах 
эквивалентных конструктивизаций.) 

2.5.4. Расширения конструктивных структур. Истоки 
общей теории конструктивных структур лежат в теории 
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конструктивных полей (см. [Рабин, 1960]), где, в частности, 
было введено понятие допустимой (асІтіззіЬІе) одно-однсь 
значной нумерации какой-либо алгебры: допустимость оз¬ 
начает, что операциям алгебры соответствуют вычислимые 
функции на номерах. Для классической теории полей весьма 
типичным является рассмотрение различных расширений. 
В случае конструктивных структур возникает естественный 
вопрос о возможности продолжения конструктивизации на 
расширение. . 

Во многих важных случаях любая конструктивизация 
исходной структуры допускает такое продолжение. Напри¬ 
мер, всякая конструктивизация поля продолжается на его 
алгебраическое замыкание (см. [Рабин, 1960], [Ершов Ю., 
1980, гл. 6, § 1, предложение 6; следствие 1 теоремы 2]), 
то же верно для вещественного замыкания упорядоченного 
поля — [Ершов Ю., 1974, гл. 3, § 1, предложение 10; §4, 
теорема 3]. В случае произвольного алгебраического расши¬ 
рения Р г поля Р необходимое и достаточное условие продол¬ 
жаемости конструктивизации ѵ: [М-ѵЕ до конструктивиза¬ 
ции поля Р' состоит в перечислимости множества тех много¬ 
членов Р [х], которые имеют корень в Р' (см. [Ершов Ю., 
1980, гл. 6, § 3, теорема 4]). Однако, конечно, вопрос о про¬ 
должаемости конструктивизации интересен не только для 
Полей. Например, для всякой локально нильпотентной груп¬ 
пы без кручения ее конструктивизация продолжается до кон¬ 
структивизации ее пополнения (см. [Ершов Ю., 1974, гл. 3, 
§ 3], [Ершов Ю., 1980, гл. 6, §3, теорема 2]). 

Вообще, пусть задана структура Шс, ее конструктивиза¬ 
ция ѵ и расширение этой структуры ЭДГ. Существует ли про¬ 
должение конструктивизации ѵ на 9К'? В широком классе 
ситуаций, в частности для всех приведенных выше приме¬ 
ров, положительный ответ на этот вопрос позволяет дать 
теорема Ершова о ядре (см. [Ершов Ю., 1972], [Ершов Ю., 
1974, гл. 3, §9], [Ершов Ю., 1980, гл. 6, §3]). 

2.5.5. Алгебраически корректные массовые проблемы. 
Разумеется, если нумерация конструктивна, алгоритмичес¬ 
кая проблема распознавания равенства элементов (задан¬ 
ных номерами в этой нумерации) решима по определению. 
Однако и в этом случае другие алгоритмические массовые 
проблемы, формулируемые для данной структуры в алгеб¬ 
раических терминах, могут оставаться нерешаемыми. Воз¬ 
никает вопрос, что такое вообще алгоритмическая массовая 
проблема, формулируемая в алгебраических терминах, нли, 
как мы будем говорить, алгебраически корректная алгорит- 
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мическая массовая проблема. В следующем абзаце мы на¬ 
деемся .предложить адекватное определение (причем не 
только для конструктивных, но для произвольных нумеро¬ 
ванных алгебраических систем). 

Фиксируем какую-либо нумерованную алгебраическую 
систему. Пусть М — ее носитель. Обозначим через М°° мно¬ 
жество всех кортежей над ' М. Для любого подмножества 
Рс:М°° можно поставить алгоритмическую массовую про¬ 
блему А р - найти алгоритм, распознающий по номерам 
пи . . ., п к элементов а 1( . . ., а к , принадлежит ли кортеж 
(Сі, .... а к ) подмножеству Р. Назовем Р устойчивым, если 
оно сохраняется при автоморфизмах, т. е. если для любого 
автоморфизма а нашей алгебраической системы имеет место 
а(Р)=Р. Проблема А Р называется алгебраически коррект¬ 
ной, если оиа поставлена для устойчивого Р. Итак, алгеб¬ 
раически корректная алгоритмическая массовая проблема 
(сокращенно — АКАМП) есть проблема построения алго¬ 
ритма, распознающего по номерам каких угодно элементов 
алгебраической системы, принадлежит ли кортеж этих эле¬ 
ментов произвольному, но фиксированному устойчивому 
множеству. Мы рассматриваем понятие АКАМП как отраже¬ 
ние наших интуитивных представлений о (внутренних, см. 
§2.1) массовых проблемах, сформулированных в алгебраи¬ 
ческих терминах. 

На совокупности всевозможных АКАМП для фиксиро¬ 
ванной алгебраической системы вводится естественный пред- 
порядок: АКАМП А' сложнее, чем АКАМП А * (а А а про¬ 
ще, чем А'), коль скоро при всякой конструктивизации, при 
которой решима А', непременно решима и А"\ Бывают ли 
проблемы различной сложности, т. е. неэквивалентные от¬ 
носительно только что введенного предпорядка? Этот воп¬ 
рос был задан одним из авторов Гончарову. В ответном 
письме последнего от 1 июля 1981 г. был указан пример 
реляционной системы и двух ее АКАМП различной слож¬ 
ности. Указанная система была специально создана с целью 
ответа на указанный вопрос, н авторам неизвестно, возмож¬ 
но ли обнаружить этот эффект в «реально существующих» 
алгебраических системах. 

2.5.6. Алгоритмические размеры. Алгебраически кор¬ 
ректная алгоритмическая массовая проблема, решимая при 
одной нумерации данной алгебраической системы, может 
оказаться нерешимой при другой нумерации той же ал¬ 
гебраической системы. Мальцев (см. [Мальцев, 1962а]) 
сделал тонкое наблюдение: он обнаружил, что указан- 
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ная возможность реализуется даже для конструктиви- 
заций. Именно, в [Мальцев, 1962а] исследована адди¬ 
тивная группа счетномерного векторного пространства 
0“ над полем 0 рациональных чисел. В названной работе 
эта абелева группа обозначена через и относительно нее 
установлено следующее: для группы алгоритмическая 
проблема линейной зависимости имеет решение при одной 
конструктивизации и не имеет решения при другой. Даль¬ 
нейший анализ показывает, что можно даже ограничиться 
проблемой линейной зависимости двух элементов. Таким об¬ 
разом, при одной конструктивизации группы существует 
алгоритм, распознающий по номерам произвольных двух 
элементов этой аддитивной группы, пропорциональны они 
(с рациональным множителем) или нет, а для другой кон¬ 
структивизации такого алгоритма не существует. 

Итак, для группы существуют конструктивизации 
столь различные, что возможна АКАМП, решимая при од¬ 
ной конструктивизации и неразрешимая при другой. Воз¬ 
никает понятие проблемного различия конструктивизаций 
(и, вообще, нумераций): две нумерации алгебраической сис¬ 
темы проблемно различны, если существует АКАМП, ре¬ 
шимая при одной нумерации и нерешимая при другой. Та¬ 
ким образом, Мальцев нашел первый пример проблемно 
различных конструктивизаций; ценность этого примера 
в том, что и соответствующая алгебраическая система и 
АКАМП, проблемно различающая конструктивизации, не 
были построены искусственно, а обе были обнаружены в 
математической действительности. 

Естественно назвать две нумерации проблемно эквива¬ 
лентными, если они не являются проблемно различными. 
Ясно, что отношение проблемной эквивалентности нумера¬ 
ций крупнее, или грубее, отношения колмогоровской экви¬ 
валентности, известной нам из §1.15: если две нумерации 
эквивалентны по Колмогорову, они, очевидно, и проблемно 
эквивалентны. Между этими двумя отношениями эквива¬ 
лентности можно расположить еще несколько эквивалент¬ 
ностей, так или иначе отражающих алгоритмическую приро¬ 
ду рассматриваемой алгебраической системы. Каждая из 
этих эквивалентностей, за исключением одной (эквивалент¬ 
ности по Мальцеву), получается симметризацией соответст¬ 
вующего отношения сводимости. К описанию этих отноше¬ 
ний сводимости мы сейчас и перейдем. 

Итак, фиксируем какую-либо алгебраическую систему 
с носителем М и рассмотрим различные ее нумерации. 
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На совокупности этих нумераций мы собираемся определить 
пять отношений сводимости. 

Начнем с напоминания сводимости по Колмогорову. 
По определению, нумерация а сводится по Колмогорову 
к нумерации р, коль скоро существует алгоритм, который 
по любому а-номеру любого элемента из М дает 0-ндмер 
того же элемента. Другими словами, а сводится по Колмо¬ 
горову к р, если существует такая вычислимая функция 

что ро^=а. 

Будем говорить, что нумерация а автосводится к нуме¬ 
рации Р, коль скоро существует такой автоморфизм о рас¬ 
сматриваемой алгебраической системы, что ооа сводится 
по Колмогорову к р. 

Для определения дальнейших сводимостей нужно наря¬ 
ду е произвольной нумерацией ѵ множества М рассмотреть 
кортежное распространение ѵ этой нумерации. Если Ра 
сМ”, то ѵ~ 1 (Р)с№°; говоря в дальнейшем о характеристи¬ 
ческой функции множества ѵ~*(Р), мы имеем в виду либо 
функцию, определенную на №% либо (это безразлично) 
функцию, определенную на некотором ансамбле, включаю¬ 
щем 

Будем говорить, что нумерация а равномерно сводится 
к нумерации р, коль скоро существует такой вычислимый 
оператор (в смысле § 1.13), который для любого устойчи¬ 
вого РаМ°° преобразует характеристическую функцию 
множества р~ 1 (Р) в характеристическую функцию множест¬ 
ва а~ 1 (Р). (В статье [Успенский, Семенов, 1982] равномер¬ 
ная и программная сводимости по недосмотру сформулиро¬ 
ваны «в противоположную сторону».) 

Фиксируем теперь некоторый способ программирования 
и будем говорить, что нумерация а программно сводится к 
нумерации р, коль скоро существует алгоритм, обладающий 
следующим свойством! всякий раз, как р оказывается ка¬ 
кой-либо программой характеристической функции какого- 
либо множества вида |3~ 1 (Р), где Р есть Какое угодно устой¬ 
чивое подмножество множества М“, алгоритм дает резуль¬ 
тат в применении к р и этим результатом оказывается одна 
из программ характеристической функции множества 
а -1 (Р). В силу взаимной транслируемости способов про¬ 
граммирования (см. § 1.)4), отношение программной своди¬ 
мости не зависит от выбора способа программирования. 

. Наконец, скажем, что нумерация а проблемно сводится 
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к нумерации р, если всякая АКАМП, имеющая решение при 
нумерации р, имеет решение и при нумерации а. 

Выполнение каждого из введенных отношений сводимо¬ 
сти влечет выполнение следующего — по порядку нашего 
перечисления — отношения: из сводимости нумераций по 
Колмогорову вытекает их автосводимость, из программной 
сводимости — проблемная и т. п. Далее, каждое из отноше¬ 
ний сводимости рефлексивно и транзитивно, и потому его 
симметризация приводит к своему отношению эквивалент¬ 
ности на нумерациях. Именно, две нумерации эквивалентны 
по Колмогорову (соответственно, автоэквивалентны, рав¬ 
номерно эквивалентны, программно эквивалентны, про¬ 
блемно эквивалентны), если каждая из них сводится по 
Колмогорову (соответственно, авто-, равномерно, программ¬ 
но, проблемно) к другой. Из эквивалентности по Колмогоро¬ 
ву следует автоэквивалентность, из автоэквивалентности — 
равномерная эквивалентность, из равномерной — программ¬ 
ная, из программной — проблемная. Между эквивалент¬ 
ностью по Колмогорову и автоэквивалентностью можно 
вставить еще одну эквивалентность, которую мы будем на¬ 
зывать эквивалентностью по Мальцеву. 

Будем говорить, что нумерации аир эквивалентны по 
Мальцеву, коль скоро существует такой автоморфизм о, 
что ооа и р эквивалентны по Колмогорову. Этот вид экви¬ 
валентности ввел Мальцев в [Мальцев, 1962а]. Из эквива¬ 
лентности по Колмогорову следует эквивалентность по 
Мальцеву, а из эквивалентности по Мальцеву — автоэкви¬ 
валентность. Несовпадение эквивалентностей по Колмого¬ 
рову и по Мальцеву установил Мальцев в названной статье, 
а несовпадение эквивалентности по Мальцеву с автоэкви¬ 
валентностью — Гончаров в письме одному из авторов от 
31 декабря 1985 г. 

Ограничимся теперь конструктивизациями н в дальней¬ 
шем будем рассматривать все введенные отношения эквива¬ 
лентности только на коиструктивизациях. Тогда легко об¬ 
наружить, что эквивалентность по Мальцеву совпадает о 
автоэквивалентностью. Поэтому — в применении к конст- 
руктивизациям — эквивалентность по Мальцеву можно на¬ 
зывать автоэквивалентностью ; в литературе, следуя [Маль¬ 
цев, 1962а], так и поступают; мы тоже будем так поступать. 
Несовпадение в общем случае эквивалентности по Колмого¬ 
рову и автоэквивалентности обнаружил Мальцев (см. [Маль¬ 
цев, 1962а1), а несовпадение в общем случае автоэквивалент¬ 
ности и проблемной эквивалентности обнаружил Гончаров 

.7 В. А. Успенский, А. Л. Семенов 
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(см. [Гончаров, 1983], где проблемная эквивалентность на¬ 
звана «алгебраической эквивалентностью»); говоря о несов¬ 
падении в общем случае, мы имеем в виду наличие алгебраи¬ 
ческих систем, для которых рассматриваемые эквивалент¬ 
ности не совпадают. Существует ли алгебраическая система, 
для которой равномерная эквивалентность отличается от 
программной или программная от проблемной, неизвестно 
(это неизвестно даже, если разрешить рассматривать эти 
эквивалентности не для конструктивизаций, а для произ¬ 
вольных нумераций). 

Алгебраические системы, не имеющие нетривиальных 
автоморфизмов, называются жесткими. Все введенные эк¬ 
вивалентности совпадают на множестве всех конструктиви¬ 
заций (даже на множестве всех разрешимых нумераций) 
любой жесткой алгебраической системы. Число классов эк¬ 
вивалентности, на которые разбивается множество всех 
конструктивизаций, естественно в этом случае называть 
алгоритмическим размером рассматриваемой алгебраичес¬ 
кой системы. В общем случае, не предполагающем жестко¬ 
сти, понятие алгоритмического размера распадается на пять 
понятий! 1) колмогоровский размер ; 2) мальцевский размер, 
или авторазмер', 3) равномерный размер', 4) программный 
размер', 5) проблемный размер. Понятие авторазмера ввел 
и изучил Гончаров (см. ІГончаров, 1980], [Гончаров, 19806]). 
В [Гончаров, 1981] авторазмер назван «алгоритмической 
размерностью»; в нашем понимании это один из алгоритми¬ 
ческих размеров. 

Набор, составленный из пяти алгоритмических размеров, 
характеризует рассматриваемую алгебраическую систему 
с точки зрения разнообразия ее конструктивизаций. При 
изучении этой характеристики естественно возникает сле¬ 
дующая проблематика, подразделяемая на частную и об¬ 
щую. 

Частная проблематика состоит в вычислении алгорит¬ 
мических размеров конкретных алгебраических систем. 
Для группы например, колмогоровский размер конти¬ 
нуален (см. [Мальцев, 1962а1), авторазмер счетно-бесконе¬ 
чен (см. [Нуртазин 1974], [Нуртазин, 1974а, теорема 1]) и 
проблемный размер тоже счетно-бесконечен (см. [Гончаров 
1983]). 

Общая проблематика состоит в выяснении того, какие 
наборы пяти чисел могут быть наборами пяти алгоритмиче¬ 
ских размеров алгебраических систем, В рамках этой об¬ 
щей проблематики известно следующее. Авторазмер любой 
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алгебраической системы не более чем счетен (см., например, 
[Гончаров, 1976]). В то же время колмогоровский размер 
может быть и континуальным. Как установлено в основной 
теореме из [Гончаров, 1980], для любого кардинала »Х# 0 
существует жесткое частично упорядоченное множество ав¬ 
торазмера ѵ, (ввиду жесткости здесь можно говорить просто 
об алгоритмическом размере). В то же время для любого 
кардинала >Х2 Х ° существует реляционная структура кол¬ 
могоровского размера и (см. [Гончаров, 1980, следствие]). 

Для произвольной фиксированной алгебраической си¬ 
стемы очевидны нестрогие неравенства: (проблемный раз- 
мер)< (программный размер) < (равномерный размер) < 
(авторазмер) ^ (колмогоровский размер). 

Естественно возникают следующие два вопроса. 

Первый вопрос. Бывают ли алгебраические системы, для 
которых один из знаков X» можно заменить на «О? Здесь 
известно лишь следующее: 1) существуют алгебраические 
системы, для которых последний из знаков X» можно за¬ 
менить на «<» (такова, например, изучавшаяся Мальцевым 
группа /?«,); 2) существует реляционная алгебраическая 
система, имеющая проблемный размер 2 и авторазмер На 
(пример такой структуры приведен в личном сообщении 
Гончарова одному из авторов от 6 июня 1981 г.). 

Второй вопрос. Когда знаки X» можно заменить на зна¬ 
ки «==»? Как уже отмечалось, все знаки нестрогого нера¬ 
венства можно заменить на знаки равенства в случае жест¬ 
кой алгебраической системы. Очевидно также, что первые 
три знака можно заменить на знак равенства в случае, ког¬ 
да авторазмер равен единице. Алгебраические системы авто¬ 
размера единица Мальцев в [Мальцев, 1962а] назвал ав¬ 
тоустойчивыми ; в той же работе он отметил, что для N 
всякая полная р-примитивиая абелева группа конечного 
ранга является автоустойчивой. Критерий автоустойчиво¬ 
сти для конструктивизируемых булевых алгебр найден 
в [Гончаров, 1975, теорема 5]: этот критерий состоит в ко¬ 
нечности алгебры. А вот любопытные условия, достаточные 
для того, чтобы конструктивизируемая реляционная 
алгебраическая система имела бесконечный авторазмер: 
структура должна иметь как сильную крнструктивизацию, 
так и конструктивизацию, не являющуюся сильной (см. 
[Гончаров, 1975а, следствие 3.6]). 

2.5.7. Конструктивные и конструктивизируемые модели. 
В классической теории моделей центральной проблемой яв¬ 
ляется выяснение связей между свойствами какого-либо мно- 


7 * 



196 ЧАСТЬ ВТОРАЯ. МАТЕМАТИЧЕСКИЕ ПРИЛОЖЕНИЯ 

жества формул 5 и устройством класса всевозможных моде¬ 
лей для 5. Аналогично, в теории конструктивных моделей 
интересуются устройством класса всех конструктивных 
или классов всех сильно конструктивных моделей множе¬ 
ства 5. (Конструктивная или сильно конструктивная модель 
для 5 — это конструктивная или соответственно сильно 
конструктивная нумерованная алгебраическая система 
(5Ш, ѵ), такая что 5Ш есть модель для 5 в обычном смыс¬ 
ле — т. е. все формулы из 5 истинны в 9Л.) Если 5 есть тео¬ 
рия, т. е. непротиворечивая совокупность формул, замкну¬ 
тая относительно следствий, то необходимым и достаточным 
условием наличия у 5 сильно конструктивных моделей слу¬ 
жит разрешимость 5 (необходимость очевидна и отмечена 
выше, о достаточности см. [Ершов Ю., 1974, гл. 2, § 3, пред¬ 
ложение 1], [Ершов Ю., 1980, гл. 6, §2, предложение 3]). 
Требование, чтобы 5 образовывало теорию, т. е. было замк¬ 
нутым относительно следствий, является существенным: 
можно предъявить непротиворечивое разрешимое, даже 
одноэлементное 5 (т. е., попросту, формулу), не допускаю¬ 
щее конструктивных, тем паче сильно конструктивных, мо¬ 
делей. Первые примеры непротиворечивых формул, не 
имеющих конструктивных моделей, были предложены в 
[Крайзель, 1953] и [Мостовский, 1953]; более того, такой 
пример можно найти среди формул, содержащих всего толь¬ 
ко один, и притом бинарный, предикат (см. [Рабин, 1958]). 
Каждый из трех перечисленных примеров получался конъ¬ 
юнкцией подходящей системы аксиом теории множеств, од¬ 
нако такие примеры возможны и на чисто арифметической 
основе (см. [Мостовский, 19551, [Баур, 1974], [Ершов Ю., 
1974, гл. 1, §2], [Ершов Ю., 1980, гл. 6, §2]). 

Существуют теории, всякая счетная модель которых 
сильно конструктивизируема; как показывает упомянутое 
выше предложение из [Ершов Ю., 1974, гл. 2, § 3] и [Ершов 
Ю., 1980, гл. 6, § 2], такой является всякая разрешимая тео¬ 
рия, категоричная в счетной мощности. Оказывается, что 
тем же свойством обладает и всякая разрешимая теория, 
категоричная в некоторой несчетной мощности (см. [Ер¬ 
шов Ю., 1974, гл. 3, § 1, с. 74]). Бывает и иначе, одни счет¬ 
ные модели данной теории допускают конструктивизацию, 
а другие — нет. В частности, для любого л^З существует 
полная разрешимая теория, имеющая точно л попарно не¬ 
изоморфных счетных моделей, из которых конструктивизи¬ 
руема только одна (причем эта модель сильно конструкти¬ 
визируема) (см. [Перетятькин, 1973]). Существует полная 
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разрешимая теория, число сильно конструктивизируемых 
моделей которой (разумеется, с точностью до изоморфизма) 
равно двум (см. [Миллар, 1979]). 

Как отмечает Мостовский в своем обзоре [Мостовский, 
1966, лекция 6], «не вполне ясно, что вызывает такое своеоб¬ 
разное поведение различных аксиоматических теорий, пре- 
пятствуя одним из них иметь рекурсивные модели вообще, 
а другим — иметь более одной такой модели». 

2.5.8. Модели арифметики. Пожалуй, одним из наиболее 
принципиальных вопросов математики является вопрос о 
том, сколько существует различных (т. е. неизоморфных) 
конструктивных моделей аксиоматической арифметики. 
Под аксиоматической арифметикой мы понимаем обычную 
систему аксиом для сложения и умножения, включая ак- 
сиомную схему индукции. По крайней мере одна конструк- 
тивизируемая модель у такой аксиоматической системы су¬ 
ществует — это обычный натуральный ряд. 

Как известно, у аксиоматической арифметики сущест¬ 
вуют нестандартные (т. е. не изоморфные натуральному ря¬ 
ду), в том числе счетные нестандартные модели. Нестандарт¬ 
ные модели существуют у любой (даже неразрешимой) си¬ 
стемы аксиом арифметики — лишь бы аксиомы были запи¬ 
саны на элементарном (узком, 1-го порядка) языке и выра¬ 
жали утверждения, истинные в обычном натуральном ряду 
(например, в качестве аксиом можно взять все формулы, 
истинные в натуральном ряду). Это обстоятельство естест¬ 
венно интерпретировать как невозможность описать нату¬ 
ральный ряд никакой системой аксиом. Однако, если огра¬ 
ничиться лишь конструктивизируемыми моделями, ситуация 
кардинально меняется: для аксиоматической арифметики 
возможна только одна, с точностью до изоморфизма, 
конструктивизируемая модель: обычный натуральный ряд. 
Это утверждает теорема Тенненбаума, объявленная в ка¬ 
честве теоремы 4.3 в [Скотт, 1961] (доказательство имеется в 
[Коэн, 1966, гл. 1, § 11]). Вот короткая формулировка тео¬ 
ремы Тенненбаума: никакая нестандартная модель арифме¬ 
тики в сигнатуре сложения и умножения не является кон- 
структивизируемой. Ввиду фундаментальной значимости 
этой теоремы сформулируем ее более явно. 

Теорема Тенненбаума. Рассмотрим какую-либо счетную 
модель аксиоматической арифметики, в которой двухмест¬ 
ные функции 5 и р служат соответственно интерпретацией 
знаков «+» и «•» (т. е. для 5 и. р выполняются обычные ак¬ 
сиомы, выражающие свойства сложения и умножения, 
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включая экономную схему индукции). Пусть существует 
такая однозначная натуральная нумерация ѵ носителя мо¬ 
дели, что функции [ и ц из N в ІѴ, заданные равенствами 

ѵ(/(т, п)) = 5(ѵ(т), ѵ(п)), 
ѵ(^(/и, п)) = р(ѵ(т), ѵ(я)), 

вычислимы. Тогда рассматриваемая модель изоморфна на¬ 
туральному ряду. 

Как доказано в [Тверской, 1982], для существования ука¬ 
занного в формулировке теоремы изоморфизма достаточно, 
чтобы хотя бы одна из функций / и § оказалась вычислимой. 
Другими словами, не существует однозначной нумерации 
нестандартной модели арифметики, относительно которой 
обе функции «, р (Тенненбаум) или даже хотя бы одна из 
них (Тверской) были бы вычислимыми (определение см. в 
§1.15). Поскольку всякая разрешимая нумерация беско¬ 
нечного множества эквивалентна однозначной, не сущест¬ 
вует и разрешимой нумерации с такими свойствами. 

Таким образом, весь эффект нестандартных моделей объ¬ 
ясняется тем, что мы допускаем невычислимые з и р в ка¬ 
честве интерпретаций для «+» и «•». Если же ограничиться 
рассмотрением только вычислимых «сложения» и «умноже¬ 
ния» (а разве бывают другие?), нестандартные модели исче¬ 
зают, и, ко всеобщему удовлетворению, натуральный ряд 
оказывается полностью описанным аксиоматической ариф¬ 
метикой. 

§ 2.6. Приложения к теории вероятностей: определения 

случайной последовательности 

2.6.0. Рассмотрим бесконечные последовательности, со¬ 
ставленные из букв какого-либо конечного алфавита, напри¬ 
мер двоичные последовательности. Наша интуиция выделя¬ 
ет среди таких последовательностей случайные. Традицион¬ 
ная теория вероятностей оказывается бессильной перед 
подобной задачей: она не в состоянии определить, что та¬ 
кое индивидуальная случайная последовательность. Теория 
вероятностей вообще ничего не утверждает ни про какую 
отдельную последовательность, а только про совокупности 
таких последовательностей. Если в теории вероятностей и 
говорят «возьмем случайную последовательность», то это 
всего лишь вольность речи, «аЬиз йе 1ап§а§е» по Бурбаки: 
когда в дальнейшем про эту «взятую» последовательность 
нечто утверждается, точный смысл делаемого утверждения 
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состоит в том, что некое свойство выполняется для «подав¬ 
ляющего большинства» последовательностей. 

В то же время ясно, что задача дать математическое 
определение понятию «случайная последовательность» важ¬ 
на и с методологической, и с практической точек зренияі 
говоря о практической точке зрения, мы имеем в виду преж¬ 
де всего использование метода Монте-Карло. Впервые эта 
задача была рассмотрена фон Мизесом в [Мизес, 1919]; о его 
подходе к определению понятия случайной последователь¬ 
ности (в терминологии Мизеса — «Коііекііѵ») см. далее. 

Одно из наиболее выдающихся применений теории алго¬ 
ритмов состоит как раз в том, что эта теория предлагает 
определение индивидуальной случайной последовательно¬ 
сти — определение, которое, по-видимому, можно рассмат¬ 
ривать как окончательное. Мы имеем в виду определение 
случайности по Колмогорову и равносильное ему опреде¬ 
ление случайности по Мартин-Лёфу. Эти определения при¬ 
водятся ниже. 

К понятию случайной последовательности можно подойти 
с трех сторон. Мы назовем эти подходы частотным , слож- 
ностным и количественным. 

Частотный подход основан на том, что в случайной после¬ 
довательности должна соблюдаться устойчивость частот; 
более того, эта устойчивость должна иметь место и для лю¬ 
бой «законной» подпоследовательности рассматриваемой 
последовательности. Так, в случайной двоичной последо¬ 
вательности, в которой знаки 0 и 1 появляются независимо 
и с равными вероятностями, эти знаки должны быть рас¬ 
пределены равномерно не только в самой последовательно¬ 
сти, но и в любой из подпоследовательностей, выделенной 
каким-нибудь правилом. Таким образом, частотный под¬ 
ход отражает требование, чтобы в случайной последова¬ 
тельности отсутствовали какие-либо выраженные законо¬ 
мерности. 

Сложностный подход основан на том, что случайная по¬ 
следовательность должна иметь сложное строение, а имен¬ 
но энтропии ее начальных отрезков должны быть доста¬ 
точно велики. 

Наконец, количественный подход основан на том, что 
случайных последовательностей очень много, а неслучай¬ 
ных — очень мало. Более точно — в терминах традицион¬ 
ной теории вероятностей — последовательность случайна 
с вероятностью единица; поэтому этот подход можно было 
бы назвать также «теоретико-вероятностным» или «теоре- 
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тико-мерным», имея в виду, что распределение вероятно¬ 
стей — это просто мера на пространстве всех последова¬ 
тельностей. 

Перечисленные три содержательные подхода конкрети¬ 
зируются в излагаемых ниже точных алгоритмических 
определениях. Но сперва — некоторые комментарии. Преж¬ 
де чем давать обещанные алгоритмические определения, от¬ 
метим, что понятие случайности очевидным образом зависит 
от заданного распределения вероятностей на множестве й 
всех двоичных последовательностей (для простоты мы рас¬ 
сматриваем только двоичные последовательности). Последо¬ 
вательность со значительным преобразованием нулей заве¬ 
домо неслучайна при одинаковых вероятностях появления 
0 и 1, но может оказаться случайной в других ситуациях. 
В качестве допустимых распределений вероятностей в этом 
параграфе рассматриваются только вычислимые распреде¬ 
ления. Вычислимое распределение вероятностей на й —■' 
это вычислимая мера на й, подчиненная условию р(й) = 1; 
мера р. на й называется вычислимой, если существует алго¬ 
ритм, дающий по всякому двоичному слову х € 2 програм¬ 
му числа р(Гя), где 

Г* = { м € П [ со является продолжением х}. 

Простейший класс вычислимых распределений образуют 
вычислимые бернуллиевы меры. Бернуллиева мера возни¬ 
кает, если 0 и 1 появляются независимо с вероятностями р 
и д: тогда, если слово х^ В содержит т нулей и п единиц, 
р (Т^)—р т д п . Если вероятности р и д суть вычислимые дей¬ 
ствительные числа, бернуллиева мера является вычисли¬ 
мой. Важнейший частный случай вычислимой бернуллие-» 
вой меры — равномерная бернуллиева мера, для которой 

р = д^1, р(Г я ) = 2-* ( *>. 

Если со — последовательность, то через со (і) обозначает-» 
ся ее і- й член, а через (ш) п — ее начальный отрезок длины 
п, т. е. слово ю(0)со(1). . .со(/г—1). * 

Мы переходим теперь к вариантам определения случай* 
ности, воплощающим на основе теории алгоритмов излоі 
женные выше три подхода. I 

2.6.1. Частотный подход. Этот подход был предложен! 
фон Мизесом в [Мизес, 1919], [Мизес, 1928]. Он применим 
только в случае бернуллиевой меры, и неясно, как его пере! 
нести на произвольные распределения вероятностей (дажі 
на вычислимые распределения). 
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Пусть фиксированы числа ряд, лежащие в интервале 
(0, 1), и р+д= 1. Бесконечная двоичная последовательность 
ы называется случайной по бернуллиевой мере, соответст¬ 
вующей данным р и д, если для любой бесконечной последо¬ 
вательности х. полученной из со с помощью некоторого до¬ 
пустимого правила выбора, средняя частота единиц в 
X, т. е. предел 

Ііш X (°)-Ь • -+х(я— і) 

п-*е о Я * 

существует и равна д. 

В при веденной формулировке многое требует уточнения. 
Прежде всего нужно объяснить, что мы называем правилом 
выбора и как с помощью правил выбора из одной последо¬ 
вательности получить другую. Дадим формальные опреде¬ 
ления соответствующих понятий. Условимся называть 
правилом выбора любое отображение, сопоставляющее с 
каждой бесконечной последовательностью нулей и единиц 
некоторую (возможно, конечную) последовательность нату¬ 
ральных чисел. Эту последовательность мы будем рассмат¬ 
ривать как последовательность номеров членов, выбирае¬ 
мых из исходной последовательности. Более точно, пусть 
дано правило выбора Р и последовательность нулей и еди¬ 
ниц а. Пусть л(0), л(1),. . .— последовательность нату¬ 
ральных чисел, являющаяся значением Р на а. Тогда после¬ 
довательность а (л (0)), а(л(1)) . . . мы будем называть по¬ 
следовательностью, полученной с помощью Р из а. Таким 
образом, с каждым правилом выбора естественно связы¬ 
вается отображение множества й бесконечных последова¬ 
тельностей 0 и 1 в множество Е |_|й конечных и бесконеч¬ 
ных последовательностей 0 и 1. Назвав всевозможные всюду 
определенные отображения й в Е |_) й трансформациями, 
можно сказать, что каждому правилу выбора соответст¬ 
вует трансформация, переводящая последовательность а 
в последовательность, полученную из а с помощью правила 
выбора р. 

Итак, мы объяснили, что такое правило выбора и как с 
его помощью из одной последовательности получить дру¬ 
гую. Осталось теперь выделить среди правил выбора до¬ 
пустимые — и данному выше определению случайности бу¬ 
дет придан точный смысл. Существуют различные варианты 
такого выделения — и, следовательно, различные опреде¬ 
ления случайности в рамках частотного подхода. Чем шире 
класс допустимых правил выбора, тем больше требований 
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предъявляется к случайной последовательности и тем уже 
получается класс случайных последовательностей. 

Осталось дать точные определения различных классов 
допустимых правил выбора — и формальное определение 
различных классов случайных последовательностей в рам¬ 
ках частотного подхода будет завершено. Но мы отложим 
их, а сейчас дадим некоторые неформальные комментарии 
(в частности, исторического характера). Точные определе¬ 
ния будут даны позже, и каждое из них будет начинаться 
словами: «Определение случайности по Мизесу —...» 

Наши комментарии начнем с того, что рассмотрим не¬ 
сколько примеров правил выбора, которые окажутся до¬ 
пустимыми при любом из приводимых далее определений. 
Первое правило ставит в соответствие любой последователь¬ 
ности нулей и единиц последовательность 0, 1, 2, 3, . . . 
С его помощью из любой последовательности получается 
она сама, так что задаваемая им трансформация — тож¬ 
дественная. Чуть более сложно устроено второе правило, 
ставящее в соответствие любой последовательности нулей и 
единиц последовательность 0, 2, 4, ... Соответствующая 
трансформация состоит в выбрасывании всех членов ю(і) 
с нечетными і. 

Приведем теперь пример правила выбора, значение кото¬ 
рого на последовательности со зависит от этой последова¬ 
тельности! каждой последовательности со=*со(0)со(1), . . . 
ставится в соответствие возрастающая последовательность, 
состоящая из всех тех п, для которых со (п —1)=0. Соответ¬ 
ствующая трансформация такова: взяв исходную последо¬ 
вательность нулей и единиц, нужно оставить в ней члены, 
идущие после нулей, а остальные вычеркнуть. А вот при¬ 
мер правила, не являющегося допустимым ни при каком из 
приводимых ниже определений допустимости: заменим в 
описании предыдущего правила выбора условие «со (п — 1) = 
=0» на условие «со(п)=0». Тогда соответствующая транс¬ 
формация будет отображать любую последовательность в 
последовательность из одних нулей (конечную, если в ис¬ 
ходной последовательности было конечное число нулей). 

Исторически первое определение допустимого правила 
выбора было предложено А. Чёрчем в [Чёрч, 1940] (его фор¬ 
мулировку можно найти также в [Мартин-Лёф, 1968] и в 
[Кнут, 1969, п. 3, 5С, определение К5]). Допустимые по 
Чёрчу правила выбора ставят в соответствие элементам О 
некоторые возрастающие последовательности натуральных 
чисел. Поэтому соответствующие трансформации сопостав- 
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ляют с каждой последовательностью ее подпоследователь¬ 
ность, получающуюся из исходной отбрасыванием некото¬ 
рых членов. При этом оставленные члены идут в том же 
порядке, в котором они шли в исходной последовательно¬ 
сти. Вопрос об оставлении или выбрасывании данного члена 
последовательности решается алгоритмически в зависимо¬ 
сти от значений предыдущих членов последовательности. 
Возникающее понятие случайности (точное определение 
которого будет дано ниже) мы будем называть случайностью 
по Мизесу — Чёрчу. 

Недостатки этого определения демонстрируются двумя 
примерами. Первый пример содержится в построениях Бил¬ 
ля (см. [Мартин-Лёф, 1968], [Кнут, 1969, п. 3.5, упр. 31], 
(Якобс, 1970]). Именно, из них вытекает существование 
случайной по Мизесу — Чёрчу последовательности (при р=* 

=д = у), любой начальный отрезок которой содержит боль¬ 
ше нулей, чем единиц. Эго, по-видимому, противоречит на¬ 
шей интуиции; кроме того, мера множества последователь¬ 
ностей с таким свойством равна нулю. Второй пример был 
построен Лавлэндом в [Лавлэнд, 1966, § 3], указавшим 
случайную (по Мизесу — Чёрчу) последовательность, ста¬ 
новящуюся неслучайной после вычислимой перестановки 
ее членов. Эго также противоречит нашей интуиции. 

Колмогоров в [Колмогоров, 1963, замечание 2] предло¬ 
жил модифицировать определение Чёрча, расширив класс 
допустимых правил выбора. Допустимое в смысле Колмо¬ 
горова правило относит каждой последовательности неко¬ 
торую конечную или бесконечную последовательность 
&(0) Л(1) к(2). . ., причем функция к инъективна ( к(і)ф 
фкф при іф=і), но не обязана быть монотонной (в случае 
определения Чёрча к монотонна). Точное определение допу¬ 
стимости по Колмогорову см. ниже. Благодаря этому рас¬ 
ширению пример, аналогичный примеру Лавлэнда, стано¬ 
вится невозможным (случайная по Колмогорову последо¬ 
вательность, как нетрудно доказать, остается случайной 
после вычислимой перестановки ее членов). Можно ли по¬ 
строить аналог примера Билля для такого определения до¬ 
пустимости, неизвестно. Определение Колмогорова было 
впоследствии независимо найдено Лавлэндом (см. [Лав¬ 
лэнд, 1966а, с. 499]). Поэтому соответствующий класс слу¬ 
чайных последовательностей мы будем называть классом 
случайных по Мизесу — Колмогорову—Лавлэнду после¬ 
довательностей. 
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Сходное определение случайности приводит Д. Кнут 
[Кнут, 1969, п. 3, 5С, определение Кб]. В [Успенский, Се¬ 
менов, 1981] разница между определением Кб Кнута и опре¬ 
делением Мизеса — Колмогорова — Лавлэнда была не за¬ 
мечена авторами, в результате чего случайными по Ми- 
зесу — Колмогорову — Лавлэнду ошибочно были названы 
последовательности, удовлетворяющие требованиям опре¬ 
деления Кб Кнута. Последовательности, удовлетворяющие 
определению Кнута, мы будем называть случайными по 
Мизесу — Кнуту. 

Всякая случайная по Мизесу — Колмогорову — Лав¬ 
лэнду последовательность является случайной по Мизе¬ 
су — Кнуту; всякая последовательность, случайная по Ми¬ 
зесу — Кнуту, случайна по Мизесу — Чёрчу (см. [Кнут, 
1969, п. 3.5 С]). Не всякая случайная по Мизесу — Чёрчу 
последовательность случайна по Мизесу — Кнуту: это сле¬ 
дует из существования примера Лавлэнда и из того, что 
случайность по Мизесу — Кнуту сохраняется при вычис¬ 
лимой перестановке. Существуют ли последовательности, 
случайные по Мизесу — Кнуту, но не случайные по Ми¬ 
зесу — Колмогорову — Лавлэнду, авторам неизвестно. 

В качестве примеров «эмпирических случайных последо¬ 
вательностей (етрігізсЬе Коііекііѵе)» Мизес рассматривал 
последовательности, возникающие в азартных играх (при 
бросании костей и т. п.). Отсутствие правила выбора, по¬ 
зволяющего получить последовательность с «анормальным» 
распределением нулей и единиц, Мизес интерпретировал 
как «невозможность системы игры». Формулировка опреде¬ 
лений случайности по Мизесу — Чёрчу и Мизесу — Кол¬ 
могорову — Лавлэнду в терминах игр имеется в [Шень, 
1982, §3 и 6]. 

До сих пор мы обсуждали различные частотные опреде¬ 
ления случайности, не приводя точных формулировок. Те¬ 
перь настало время их привести. Напомним, что для опре¬ 
деления того или иного варианта случайности необходимо 
указать, какие правила выбора считаются допустимыми 
(при этом варианте). 

Мы предполагаем, что на пространстве й задана вычис¬ 
лимая бернуллиева мера и вероятности появления 0 и 1 
равны р и ^ соответственно. 

Определение случайности по Мизесу — Чёрчу. Допусти¬ 
мое правило выбора С 8 задается разрешимым подмножест¬ 
вом 5с: 3. Значением этого правила на последовательности, 
о будет возрастающая последовательность к, которая вклю- 
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чает те и только те натуральные числа п, для которых 
(о)) п С 5. Таким образом, последовательность со называется 
случайной по Миэесу — Черчу, если для всякого разреши¬ 
мого подмножества 5с 3, для которого подпоследователь¬ 
ность со 5 , полученная из со с помощью С 8 , бесконечна, сред¬ 
няя частота единиц в этой подпоследовательности сущест¬ 
вует и равна < 7 . 

Определение случайности по Миэесу — Колмогорову — 
Лавлэнду. Приводя это определение, мы сознательно от¬ 
казываемся комментировать содержательный смысл допу¬ 
стимых по Колмогорову — Лавлэнду правил. Такие ком¬ 
ментарии можно найти в [Шень, 1982, § 6 ]; следует иметь 
в виду, что функции, обозначаемые нами далее через / и 
8, там обозначены через О и Я. Итак, вот формальное опре¬ 
деление. Допустимое правило выбора К/ „задается двумя 
вычислимыми функциями / и 8 из Е в N. Чтобы применить 
его к последовательности со, надо вначале образовать после¬ 
довательность 6 с помощью рекуррентной формулы 

к(п) = } (со (к (0)) (а (к (1)).. .со (к (п — 1))), 

применяемой до тех пор, пока 6 ( 0 ),. . ,, 6 (п) определены и 
различны. Как только появится первое такое п, что к (п) 
не определено или совпадает с 6 ($) при некотором $<.п 
(если такие п вообще существуют), процесс образования по¬ 
следовательности к прекращается; в этом случае к оказы¬ 
вается конечной (а именно л-членной). Затем нужно исклю¬ 
чить некоторые члены из последовательности к (не меняя 
порядка оставшихся). Именно, нужно оставить те и только 
те члены к(т), для которых ^(со( 6 ( 0 )). . .со (к(1 — 1 ))) опре¬ 
делено при всех /< 7 и и 8 ( м (6(0)). . .со( 6 (т—1)))=0. Полу¬ 
ченная последовательность 6 ' будет значением допустимого 
по Колмогорову — Лавлэнду правила К/, г на последова¬ 
тельности со. Таким образом, последовательность со назы¬ 
вается случайной ' по Миэесу — Колмогорову — Лавлэнду, 
если для всяких вычислимых функций / и 8> Д Ля которых 
последовательность, полученная из со с помощью правила 
К/ >г , бесконечна, средняя частота единиц в этой последо¬ 
вательности существует и равна < 7 . 

Определение случайности по Миэесу — Кнуту (опреде¬ 
ление Кб в [Кнут, 1969, п. 3.5С]) получается из определе¬ 
ния Мизеса — Колмогорова — Лавлэнда, если рассматри¬ 
вать только всюду определенные функции 8 и соответствую¬ 
щие им правила. (Функция / по-прежнему может быть не 
всюду определенной.) 
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2.6.2. Каким должен быть класс всех допустимых пра¬ 
вил выбора? Мы видели, каким образом определяется по¬ 
нятие случайной последовательности, если выбран некото¬ 
рый класс правил выбора, объявленных допустимыми. 
Естественно желать (на это указывал еще фон Мизес), что¬ 
бы применение допустимого правила выбора к случайной 
последовательности (случайной относительно данного 
класса допустимых правил) давало бы либо конечную после¬ 
довательность, либо последовательность, которая имеет не 
только заданный предел частот (что гарантируется опреде¬ 
лением случайности), но и сама является случайной отно¬ 
сительно того же класса правил). Это требование очевидно 
выполнено, если класс трансформаций, соответствующих 
допустимым правилам выбора, замкнут относительно ком¬ 
позиции. [Эго означает, что для всяких трансформаций Т* и 
Т 2 , соответствующих допустимым правилам выбора, сущест¬ 
вует трансформация Т§, соответствующая некоторому допу¬ 
стимому правилу выбора и такая, что Т$ есть композиция 
Т 2 и Ти т. е. такая, что результат применения трансформа¬ 
ции Та к любой последовательности со, для которой 7\ (ы) — 
бесконечная последовательность, совпадает с Т 2 (7\(со)).] 
В самом деле, если класс трансформаций замкнут и если с 
помощью допустимого правила выбора из случайной после¬ 
довательности со получается последовательность о*, то 
со* также случайна» действительно, любая последователь¬ 
ность (о 2 , которая может быть получена из о* с помощью 
допустимого правила выбора, имеет надлежащую среднюю 
частоту, так как может быть (в силу замкнутости) получена 
с помощью допустимого правила и непосредственно из со. 

Таким образом, разумно предъявлять к классу допусти¬ 
мых правил выбора такое требование: 

(ТЗам) класс трансформаций, соответствующих всем до¬ 
пустимым правилам выбора, должен быть замкнут относи¬ 
тельно композиции. 

Мы сейчас сформулируем некоторое достаточное условие 
для этого. 

Определим понятие композиции для правил выбора. 
Пусть даны три правила выбора Рі, Р 2 и Р 2 . Мы хотим опре¬ 
делить, что означает, что Р 2 есть композиция правил Р 2 
и Рі. Пусть со — произвольная последовательность, из ко¬ 
торой с помощью правила выбора Рі получается бесконеч¬ 
ная последовательность со'. Пусть Рі(а>)=к, Р 2 ((л')=1, 
Рз(®)—т, где к, I, т — последовательности натуральных 
чисел. Проверим, выполнено ли равенствот=6о/. Если ока- 
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жегся, что это равенство выполнено для всех со, из которых 
с помощью Рі получаются бесконечные последовательности, 
то мы будем говорить, что Р а является композицией правил 
Р> и Рі. 

Легко проверить, что если Рі является композицией 
Р г и Рі, то трансформация, соответствующая Р в , является 
композицией трансформаций, соответствующих Р 2 и Рі. 
Поэтому, если выполнено условие. 

(ВЗам) для любых допустимых правил выбора Р% 
и Р 2 существует допустимое правило выбора Р 3 , яв¬ 
ляющееся их композицией, 

то выполнено и требование (ТЗам) и, следовательно, из 
случайной последовательности с помощью допустимого 
правила может получиться только случайная. 

Требование (ВЗам) выполнено для класса допустимых 
по Чёрчу правил. Для класса правил, допустимых по Кол¬ 
могорову — Лавлэнду, это не так: как доказано в [Шень, 
1982], не выполнено (ВЗам) и даже (ТЗам). Это еще не озна¬ 
чает, что применение допустимого по Колмогорову — Лав- 
лэиду правила к случайной по Мизесу — Колмогорову — 
Лавлэнду последовательности может дать не случайную 
(по Мизесу — Колмогорову — Лавлэнду) последователь¬ 
ность. (Так ли это на самом деле, авторам неизвестно.) 
Однако случайность результата применения допустимого 
правила выбора к случайной последовательности перестает 
быть очевидной. 

Этот же недостаток присущ и упомянутому выше опре¬ 
делению Кнута, так что, по нашему мнению, есть основания 
не согласиться с замечанием Кнута о том, что его определе¬ 
ние «удовлетворяет всем разумным философским требова¬ 
ниям, предъявляемым к понятию случайности». 

Попытка сформулировать определение допустимости, 
замкнутое относительно композиции, предпринята в [Шень, 
1982]. Прежде чем изложить определение, отметим две его 
особенности. Первая из них состоит в том, что рассматри¬ 
ваются не правила выбора, а сразу трансформации: опре¬ 
деляется понятие допустимой трансформации. Эго не ме¬ 
шает дать определение случайной последовательности (ведь 
в общей схеме Мизеса фактически используются не сами 
правила выбора, а лишь соответствующие им трансформа¬ 
ции) и ставить вопрос о выполнении условия (ТЗам), одна¬ 
ко отдаляет от первоначального замысла Мизеса и не позво¬ 
ляет поставить вопрос о выполнении условия (ВЗам). 
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Вторая особенность состоит в том, что разумное опреде¬ 
ление случайности получается лишь для равномерной бер- 
нуллиевой меры (при неравномерной мере случайных после¬ 
довательностей не оказывается вовсе). Зато в этой ситуации 
возникает класс случайных последовательностей, совпадаю¬ 
щий с классом случайных по Мартин-Лёфу последователь¬ 
ностей (об этом классе см. ниже). Можно ли дать такое 
определение допустимой трансформации, чтобы оно приво¬ 
дило к классу слачайных по Мартин-Лёфу последователь¬ 
ностей и для неравномерной меры— неизвестно. Приведем 
теперь определение допустимой трансформации из [Шень, 
1982] (там трансформации называются правилами выбора). 

Введем на 2 Ой: 1) отношение порядка, считая, что 
х^.у, если х есть начало у\ 2) топологию, считая базовыми 
открытыми множествами множества / а ={г/^5ііП|л:^л/} 
для всех конечных х. Всюду определенное непрерывное отоб¬ 
ражение Рі 5II й-»-2 у Й назовем вычислимым, если мно¬ 
жество тех пар {х, у) конечных последовательностей, для 
которых у^Р(х), перечислимо, и регулярным, если для 
любой конечной последовательности у равномерная бер- 
нуллиева мера множества (о € ЩР((о)^у} не превосходит 
меры множества І у , т. е. числа 2 ~ п у\ где 1(у) —длина у. 
Допустимой трансформацией назовем ограничение на Й 
произвольного непрерывного вычислимого регулярного ото¬ 
бражения. Утверждение о том, что при таком определении 
допустимости класс случайных последовательностей совпа¬ 
дает с классом случайных по Мартин-Лёфу последователь¬ 
ностей, можно легко вывести из результатов [ІІІнорр, 1971]; 
см. также ШІень, 1982, § 9]. 

2.6.3. Сложностиый подход. Этот подход, предложенный 
Колмогоровым в [Колмогоров, 1963], [Колмогоров, 1965], 
[Колмогоров, 1969] связан с материалом § 1.17. Колмогоров 
исходил из представления о таблице случайных чисел как 
о длинной, но конечной последовательности знаков (для на¬ 
глядности двоичных), столь беспорядочно устроенной, что 
она не допускает простого описания — сложность такого 
описания должна быть достаточно велика, а именно близка 
к длине последовательности. Случайность бесконечной по¬ 
следовательности означает достаточно быстрый рост энтро¬ 
пии начальных отрезков (см. [Колмогоров, 1969, п. 2]). 
Оказалось, однако, что определения случайности беско¬ 
нечных последовательностей нужно использовать не про¬ 
стую колмогоровскую энтропию, а монотонную энтропию. 

Определение случайности по Колмогорову. Рассмотрим 
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сперва случай равномерной бернуллиевой меры. Напомним 
(см. I, § 1.17), что для любой со € П имеет место В8К((<д) п ) 

^ п. Последовательность со называется случайной по Кол¬ 
могорову, если ЕЕ К ((со) п ) п. В случае произвольного вы¬ 
числимого распределения вероятностей р можно доказать, 
что для любой со ^ П 

((«)») т —( г ( ® )я ) 

(см. [Левин, 1973]). В этом общем случае последователь¬ 
ность со называется случайной по Колмогорову, если 

аа/С ((©)„) ^ — іо§ 2 р(г (и) „). 

В этом определении без изменения возникающего класса 
случайных последовательностей можно заменить 3—3- 
энтропию на 3—[^-энтропию, назвав последовательность 
случайной, если 


ЗИК (Ия) т —1°& ^( Г (ш)«)- 

В частности, если р — равномерная бернуллиева мера (ве¬ 
роятности появления 0 и 1 равны), то последовательность 
будет случайной, если выполнено любое из эквивалентных 
свойств: ЗВ/С ((со)„) ~ п или З^К ((со)„) --- п (см. [Вьюгин, 
1981, следствие 3.2]). Однако даже в этом простом случае 
нельзя заменить 3—В-энтропию на N—[^-энтропию: не¬ 
возможна последовательность со, для которой ((о)) п )~ 
'--я (см. [Мартин-Лёф, 1966], [Звонкин, Левин, 1970, теоре¬ 
ма 2.6], [Якобс, 1970, п. 2.2]). 

2.6.4. Количественный, или теоретико-мерный, подход. 
Этот подход был разработан Мартин-Лёфом (см. [Мартин- 
Лёф, 1966а], [Звонкин, Левин, 1970, § 4], [Якобс, 1970, 
§4]). В [Звонкин, Левин, 1970, §4, п. 1] после указания 
некоторых трудностей, , связанных с частотным подходом, 
отмечается: «В 1965 г. П. Мартин-Лёфу удалось, основы¬ 
ваясь на идеях А. Н. Колмогорова, дать свободное от по¬ 
добных трудностей определение случайной последователь¬ 
ности. Идея А. Н. Колмогорова состояла в том, чтобы «не¬ 
случайными» считать те последовательности, в которых наб¬ 
людается достаточно много закономерностей, где под законо¬ 
мерностью подразумевается любое проверяемое свойство 
последовательности, присущее лишь узкому их классу (до- 
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статочно малому по мере)». Случайными, таким образом, 
предлагается считать последовательности, принадлежащие 
широкому классу последовательностей, имеющих достаточно 
мало закономерностей. 

Иначе говоря, при количественном подходе случайной 
объявляется всякая последовательность, которая выдер¬ 
живает некоторые испытания на случайность, называемые 
тестами. Тест — это просто разбиение О на множество Е 
единичной меры и множество Р нулевой меры: 

Е[)Р = &, Е(]Р=0, р(Е)=1, р(Е) = 0. 

Элементы Е называются выдержавшими тест. Если потребо¬ 
вать, чтобы случайная последовательность выдерживала 
любой тест, то окажется, что случайных последовательно¬ 
стей не бывает. Мартин-Лёф предложил поэтому ограни¬ 
читься эффективными тестами, т. е. такими, в которых Р 
имеет эффективно нулевую меру. Теорема Мартин-Лёфа о 
существовании, в случае вычислимой меры р, наибольшего 
множества эффективно нулевой меры (см. выше § 2.4) по¬ 
казывает, что существуют последовательности, выдержи¬ 
вающие любой эффективный тест; именно из таких последо¬ 
вательностей и состоит конструктивный носитель меры. 

Определение случайности по Мартин-Лёфу. Пусть на й 
задано вычислимое распределение вероятностей. Последо¬ 
вательность называется случайной по Мартин-Лёфу, если 
она выдерживает любой эффективный тест или, что то же 
самое, если она принадлежит конструктивному носителю 
меры. 

Если последовательность случайна по Мартии-Лёфу от¬ 
носительно равномерной бернуллиевой меры, частота ну¬ 
лей в ее начальных отрезках стремится к у; действительно, 

из доказательства теорем теории вероятностей можно из¬ 
влечь эффективный тест, отвергающий все такие последо¬ 
вательности, у которых эта частота не стремится к у . Бо¬ 
лее того, в бернуллиевом случае всякая последователь¬ 
ность, случайная по Мартин-Лёфу, является случайной по 
Мизесу — Чёрчу (см. [Агафонов, 1975, п. 5.1]) и даже слу¬ 
чайной по Мизесу — Колмогорову — Лавлэнду (см. [Шень, 
1982, §9, с. 36, после формулировки теоремы 1]). 

2.6.5. Соотношения между различными определениями. 
Замечательным образом оказалось, что сложностный и тео¬ 
ретико-мерный подходы приводят к одному и тому же ко- 
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нечному результату. Именно, имеет место следующая ос¬ 
новная теорема (см. ее формулировку в [Левин, 1973, тео¬ 
рема 2], [Шнорр, 1973, теорема 3], [Шнорр, 1977, теорема 
4.2] и доказательство в [Шнорр, 1973], [Вьюгин, 1981, 
теорема 3.2]). 

Теорема. Для любого вычислимого распределения ве¬ 
роятностей последовательность тогда и только тогда слу¬ 
чайна по Мартин-Лёфу, когда она случайна по Колмо¬ 
горову. 

Таким образом, определения Мартин-Лёфа и Колмого¬ 
рова задают один и тот же класс последовательностей. Бо¬ 
лее широкий класе образуют последовательности, случай¬ 
ные по Мизесу — Колмогорову — Лавлэнду; всякая слу¬ 
чайная по Мартин-Лёфу последовательность случайна и по 
Мизесу — Колмогоров^— Лавлэнду (как уже отмечалось), 
а обратное, как вытекает из сформулированных в [Колмо¬ 
горов, 1969] результатов, неверно. Именно, как утверждает¬ 
ся в [Колмогоров, 1969, п. 2, с. 6], существует случайная по 
Мизесу — Колмогорову — Лавлэнду последовательность 
ю=со(0) <о(1). . ., для которой 

(Н„)4 1о §2« 

(авторы должны со всей откровенностью признаться, что 
не умеют строить такой пример). Такая последовательность, 
как легко видеть, не может быть случайной по Колмогоро¬ 
ву (а тем самым и по Мартин-Лёфу), так как N—ГЧ- и 3—3- 
энтропии слова х отличаются не более чем на С 1о§* 1(х), 
где 1(х) — длина слова х. (Напомним, что, говоря об М—М- 
энтропии слов, мы имеем в виду N—[^-энтропию нату¬ 
ральных чисел, соответствующих словам при взаимно 
однозначном соответствии, описанном в §2.17.) 

Мы приходим, таким образом, к следующей таблице, от¬ 
ражающей соотношения между различными видами случай¬ 
ностей: 

последовательности, случайные по Мартин-Лёфу = 

= последовательности, случайные по Колмогорову Ф с 
Ф с последовательности, случайные 
по Мизесу—Колмогорову—Лавлэнду с 
с: последовательности, случайные по Мизесу—Кнуту Ф с 
ф с последовательности, случайные по Мизесу—Чёрчу 

В этой таблице отмечены все известные авторам равенства и 
строгие включения; совпадает ли класс случайных по Ми- 



212 ЧАСТЬ ВТОРАЯ. МАТЕМАТИЧЕСКИЕ ПРИЛОЖЕНИЯ 

зесу — Колмогорову — Лавлэнду последовательностей с 
классом последовательностей, случайных по Мизесу — 
Кнуту, как уже отмечалось выше, авторам неизвестно. 

Для любого вычислимого распределения вероятностей на 
О класс последовательностей, случайных по Колмогорову 
или по Мартин-Лёфу, объявляется истинным классом слу¬ 
чайных последовательностей, а элементы этого класса — 
подлинно случайными последовательностями. 

Для равномерного бернуллиевого распределения пред¬ 
принятая в [Шень, 1982] попытка уточнения определения 
Мизеса также приводит к этим подлинно случайным после¬ 
довательностям. Однако уточнение из [Шень, 1982] основа¬ 
но на понятии трансформации, а не на понятии правила 
выбора (см. выше). Существует ли класс правил выбора, 
приводящий к истинному классу случайных последователь¬ 
ностей хотя бы для равномерного бернуллиевого распреде¬ 
ления — неизвестно. Несуществование такого класса пра¬ 
вил выбора означало бы, что частотный подход (по крайней 
мере в рамках замысла Мизеса) не в состоянии дать адек¬ 
ватное определение случайности. 

2.6.6. Конечные последовательности с точки зрения слу¬ 
чайности. Полезно ясно сознавать, что — при любом из 
перечисленных определений — если приписать к случай¬ 
ной последовательности спереди миллион нулей, снова по¬ 
лучится случайная последовательность. Поэтому к практи¬ 
ческой интерпретации понятия случайной последовательно¬ 
сти применительно к методу Монте-Карло следует относить¬ 
ся с осторожностью: ведь может статься, что используемая 
в этом методе последовательность (если полагаться на ее 
случайность и ни на что более) как раз и начинается с мил¬ 
лиона нулей. 

Поэтому в прикладном аспекте наиболее существенно 
понятие случайной конечной последовательности (для кото¬ 
рого понятие случайной бесконечной последовательности 
служит, так сказать, «аппроксимацией сверху»). Это поня¬ 
тие намечено Колмогоровым в [Колмогоров, 1963] (см. так¬ 
же [Кнут, 1969, п. 3.5Е]). В [Колмогоров, 1965, § 4] по это¬ 
му поводу говорится (под сложностью понимается слож¬ 
ность относительно оптимального способа описания — то, 
что в нашем тексте названо энтропией): «Грубо говоря, 
здесь речь идет о следующем. Если конечное множество М 
из очень большого числа элементов N допускает определе¬ 
ние при помощи программы длины пренебрежимо малой по 
сравнению с 1о§ 2 N, то почти все элементы М имеют слож- 
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ность К(х), близкую к 1о§а N. Элементы х$М этой сложно¬ 
сти и рассматриваются как «случайные» элементы множест¬ 
ва М». В качестве примера рассмотрим множество М, со¬ 
стоящее из всех последовательностей нулей и единиц длины 
к. Эго множество содержит элементов; чтобы задать 

его, достаточно указать к, для чего необходимо около 
1о§ а /г двоичных знаков (что мало по сравнению с 1о§ г Л/ = 
—к). Почти все элементы М имеют сложность, близкую к 
1о§ 2 /Ѵ, т. е. к к. Таким образом, в соответствии с приведен¬ 
ной только что цитатой из [Колмогоров, 1965], последова¬ 
тельность из к нулей и единиц естественно рассматривать 
как тем более «случайную», чем ближе ее энтропия к к. 

Разумеется, понятие энтропии определено, по сущест¬ 
ву, с точностью до ограниченного слагаемого, и от выбора 
того или иного оптимального способа описания зависит, 
насколько случайной окажется данная конечная последо¬ 
вательность: последовательность, «практически случай¬ 
ная» при одном оптимальном способе описания, может ока¬ 
заться «совершенно неслучайной» при другом. Однако раз¬ 
ница между энтропиями, соответствующими двум способам 
описания, оставаясь ограниченной, становится с увеличе¬ 
нием числа к все менее и менее заметной по сравненйю с к. 

Зависимость степени случайности от выбора способа 
описания может рассматриваться как аргумент в пользу 
желательности фиксации какого-нибудь одного единствен¬ 
но правильного способа описания и рассмотрения соответ¬ 
ствующей ему энтропии. Однако, как пишет Колмогоров в 
[Колмогоров, 1965, с. 10], «сомнительно, чтобы это можно 
было сделать без явного произвола. Следует, однако, ду¬ 
мать, что различные представляющиеся здесь разумные 
варианты будут приводить к оценкам сложностей, «расхо¬ 
дящимся на сотни, а не десятки тысяч бит». Требования, ко¬ 
торые следует предъявлять к «разумному» способу описа¬ 
ния Р, должны, по-видимому, включать справедливость 
утверждения 

^х(К Р (хХК 0 (х)+С) 

со сравнительно небольшими С для возможно большего 
числа естественных способов описания 0. Некоторые пред¬ 
ложения по выбору такого разумного способа имеются в 
[Левин, 1977]. 

Таким образом, выбрав способ описания конечных по¬ 
следовательностей, представляющийся нам более или ме¬ 
нее разумным, мы получаем возможность с той же степенью 
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разумности говорить о том, насколько та или иная конкрет¬ 
ная конечная последовательность случайна. 

Реально в методе Монте-Карло используются именно 
конечные последовательности. Можно считать, что практи¬ 
ческим критерием «случайности» конечной последователь¬ 
ности как раз служит успешность ее использования при 
расчетах по методу Монте-Карло; более точно, успешность 
использования любой случайной конечной последователь¬ 
ности в методе Монте-Карло естественно включать в число 
требований, предъявляемых к практически годному поня¬ 
тию случайности. А тогда отождествление случайных ко¬ 
нечных последовательностей со сложно устроенными, т. е. 
последовательностями, сложность которых относительно 
некоторого «разумного» способа описания близка к их дли¬ 
не, оправдано. 

Действительно, при разумном способе описания Р вы¬ 
сокая сложность конечной последовательности может слу¬ 
жить аргументом в пользу того, что ее использование в 
конкретном вычислении по методу Монте-Карло даст хоро¬ 
ший результат. Ведь последовательности, дающие при ис¬ 
пользовании их в вычислении по методу Монте-Карло пло¬ 
хой результат, составляют ничтожно малую часть всех 
последовательностей (это основное требование, предъяв¬ 
ляемое к вычислениям по этому методу). Поэтому всякая 
«плохая» последовательность допускает такое простое зада¬ 
ние: сначала указывается, что она «плохая», а затем указы¬ 
вается ее порядковый номер среди всех «плохих» последо¬ 
вательностей. Для указания номера понадобится сравни¬ 
тельно мало двоичных знаков, так как число «плохих» после¬ 
довательностей сравнительно мало. Таким образом, для 
«плохой» последовательности г ее сложность К а (г) невелика 
(здесь 0 — только что рассмотренный способ описания о 
помощью «простых заданий»). Поскольку способ описания 
Р «разумен», можно надеяться, что при небольшом С и 
любом х выполнено неравенство К Р (х)*^К а (х)+С. В этом 
случае окажется, что сложность (относительно Р) любой по¬ 
следовательности, дающей плохой результат при использо¬ 
вании ее в вычислениях по методу Монте-Карло, невелика. 

В заключение приведем следующее замечание, высказан¬ 
ное Колмогоровым в январе 1965 г. в его публичной лек¬ 
ции в Московском университете: попытка обнаружить вы-І 
сокоразвитую внеземную цивилизацию, основанная на 
перехвате сообщения, предназначенного для той же самой! 
или подобной цивилизации, скорее всего, обречена на про^ 
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вал. В самом деле, если цивилизация высокоразвита, то она 
умеет экономно кодировать, ее сообщение имеет большую 
удельную сложность (т. е. сложность, деленную на длину 
сообщения) и потому практически неотличимо от случай¬ 
ной последовательности сигналов, 

§ 2.7. Приложения к теории информации: 

алгоритмический подход 

к понятию количества информации 

Очень хочется уметь отвечать на вопрос, сколько инфор¬ 
мации несет то или иное сообщение, т. е. как-то измерять 
количество информации. Естественно измерять это количе¬ 
ство длиной наиболее экономного описания рассматриваемо¬ 
го сообщения: с этой точки зрения космическое сообщение, 
обсуждавшееся в конце предыдущего параграфа, несет боль¬ 
шую информацию — приближающуюся к максимально 
возможной при данной длине сообщения. Разумеется, и 
сам выбранный способ описания должен быть достаточно 
экономным, т. е. давать для всех сообщений как можно 
более короткие описания. 

Кроме того, этот способ должен позволять однозначное 
и эффективное восстановление сообщения по его описанию. 
Тем самым мы приходим к ситуации, описанной в §2.17: 
количество информации в сообщении — это его энтропия. 
Напомним, чтоб § 1.17 мы ввели разные виды энтропий, раз¬ 
личавшихся, в частности, ансамблями описаний. Здесь мы 
будем использовать в качестве ансамбля описаний ансамбль 
N или (что эквивалентно в силу наличия указанного в 
§ 1.17 изоморфизма между N и 3) ансамбль двоичных слов 
3, при том, что отношение согласованности на 3 будет 
теперь не тем, которое рассматривалось в § 1.17, а отноше¬ 
нием равенства, т. е. таким же, как на N. Напомним те¬ 
перь определение простой колмогоровской энтропии, дан¬ 
ное в § 1.17. 

Пусть V — ансамбль сообщений, т. е. просто некоторый 
ансамбль, элементы которого мы называем сообщениями. 
Способ описания — это перечислимое отношение Рс^хК, 
обладающее тем свойством, что если ( п, уі) € Я и (п, у 2 ) $ Н, 
то уі=у 2 . Иначе говоря, способ описания понимается в смы¬ 
сле § 1.17, причем отношение согласованности, заданное на 
каждом из ансамблей N и К, совпадает с равенством. По¬ 
этому по теореме Колмогорова среди всех способов описания 
существует оптимальный. Объем (напомним, что объемом 
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числа х здесь называется целая часть числа 1о§ 2 (х+1)) 
самого короткого описания объекта у^У при каком-либо 
фиксированном оптимальном способе называется простой 
колмогоровской энтропией объекта у^У (в§ 1.17 этот тер¬ 
мин применялся лишь к случаю К=М) и обозначается 
МКТС^/), а короче — просто К (у)- Итак, количество ин¬ 
формации в сообщении у оказывается естественным изме¬ 
рять простой колмогоровской энтропией этого сообщения. 
Так возникает алгоритмическая теория информации (см. 
[Барздинь, 1977]). 

Заметим, что количество информации в у определено 
лишь с точностью до аддитивной величины порядка 0(1). 
В самом деле, возможны различные оптимальные способы 
Я* и # 2 , приводящие соответственно к энтропиям Кі и К?- 
Однако в силу сказанного в § 1.17 \Кі{у) — Ка{у)\~- 0. 

Далее, рассмотрим какую-либо однозначную вычисли¬ 
мую нумерацию ансамбля У, т. е. вычислимое (1—^-ото¬ 
бражение N на У. Вспомним основную лемму из §1.17 
о соотношении между X — У-энтропией и X — К-энтропи- 
ей; в силу этой леммы, если т есть номер сообщения у, 
то |№Ше(/п) — МК7((у)|'^'0. Таким образом, количество 
информации в сообщении совпадает с количеством инфор¬ 
мации в его номере (совпадает с точностью до величины 
порядка 0(1), но ведь и само количество информации опре¬ 
делено с точностью до величины этого порядка). Это же 
рассуждение применимо и к определению количества ин¬ 
формации в паре {уі, Уі)^Ух У. Пусть № —такой ансамбль, 
что УхУ^ѴР. Количество информации в (уі, у 2 ) можно 
определять либо как N — №-энтропию самой этой пары, 
либо же равносильным образом — как N — ^-энтропию 
номера этой пары (эти определения приводят к величинам, 
различающимся на ограниченное слагаемое). 

Алгоритмическая теория информации была основана 
Колмогоровым (см. [Колмогоров, 1965]) с целью придать 
таким интуитивным понятиям, как «количество информа¬ 
ции» и «энтропия», точный смысл в применении к индиви¬ 
дуальным объектам. В традиционной (основанной на веро¬ 
ятности) теории информации, основанной Шенноном, эти 
понятия, как известно, применяются к случайным объек¬ 
там, т. е., говоря более строго, к случайным величинам. 

Исторически сложившуюся вероятностную теорию ин¬ 
формации правильнее было бы называть « теорией передачи 
информации » (см. [Добрушин, Прелов, 1979]) или шатема- 



§ 2.7. ПРИЛОЖЕНИЯ К ТЕОРИИ ИНФОРМАЦИИ 


217 


тической теорией связи» по названию основополагающей 
статьи Шеннона [Шеннон, 1948]: ведь эта теория не охва¬ 
тывает всех (прежде всего семантических) аспектов поня¬ 
тия информации. Неясно, насколько эти различные аспекты 
могут быть охвачены алгоритмической теорией информа¬ 
ции. Во всяком случае, проблемы связи этой теории с се¬ 
мантикой пока даже не поставлены. (Обсуждение некоторых 
близлежащих проблем начато в [Манин, 1981].) Реальные 
достижения алгоритмической теории информации отно¬ 
сятся к двум направлениям. Первое состоит в выяснении 
того, насколько формулы, полученные для случайных ве¬ 
личин, оказываются справедливыми применительно к ин¬ 
дивидуальным объектам. Второе заключается в установле¬ 
нии соотношений между колмогоровской и шенноновской 
энтропиями. 

Изложим основные из этих достижений. Согласно [Кол¬ 
могоров, 1969], исходным понятием теории информации 
(как вероятностной, так и алгоритмической) является ус¬ 
ловная энтропия объекта у при заданном объекте х. Она 
обозначается Н (у\х) и интерпретируется как количество 
информации, необходимое для задания объекта у в обста¬ 
новке, когда объект х уже задан. Далее определяются: 

1) (безусловная) энтропия объекта у, она обозначается 
Н (у) и определяется равенством Н (у)=Н (у\е), где е — 
какой-либо «заведомо заданный объект»; 

2) количество информации, содержащейся в объекте х 
об объекте у, оно обозначается / (х : у) и определяется ра¬ 
венством І(х : у)—Н(у) — Н(у\х). 

В алгоритмической теории информации х и у суть кон¬ 
структивные объекты, в вероятностной теории — случай¬ 
ные величины; чтобы подчеркнуть это обстоятельство, в по¬ 
следнем случае вместо х и у будем писать | и г|. Для просто¬ 
ты будем предполагать, что \ и гі принимают лишь конеч¬ 
ное число значений. Пусть і принимает значения х 1г ..., х т 
с вероятностями р и ..., р т , а ^ — значения Уі, ..., у п 

с вероятностями ^. ц п \ пусть, далее, г і3 есть вероятность 

того, что одновременно Ъ,—х ь , ц=Уі- Тогда, по определению, 

Далее, (шенноновская безусловная) энтропия Я(г))= 
=—9/ 1 о §2 Я/ может быть определена, согласно 1), как 

Н (г[Iе), где е принимает одно-единственное значение; оказы- 
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вается, что Н(х\) есть среднее число двоичных знаков, необ¬ 
ходимое для задания одного значения г|. Наконец, / (Е - п) 
определяется в соответствии с 2). Из этих определений сразу 


следует, что 

Н (т) | гі) = 0, 

(Р1) 


/(Ей і)>0, 

ДР2) 


/(|:ті) = / (трі), 

(РЗ) 


Я «6, т)» = Я (&) + Я (т) | І) 

(Р4) 

(значениями 

случайной величины (|, л> служат 

пары 

( х г , уі ), принимаемые с вероятностями гц). 



В алгоритмической теории информации в качестве 
Н(у\х) берется К (у\х). Что такое К (у\х), было разъяснено 
в § 1.17 (переход от N к произвольному У с равенством в ка¬ 
честве отношения согласованности не составляет труда). 
В том же пункте отмечалось, что при фиксации х в К (у\х) 
мы приходим к простой колмогоровской энтропии: 

Итак, и в алгоритмической теории определение Я(у)(= 
=К(у)) через Н(у\х)(—К(у\х)) происходит согласно 1). 
Далее, согласно 2), вводится количество информации 
I (х : у)=К (у)—К(у\х). 

При переходе к алгоритмической теории информации 
соотношение вероятностной теории претерпевают некото¬ 
рые изменения, как очевидные, так и неочевидные. Очевид¬ 
ные изменения вызваны тем, что «все предложения алго¬ 
ритмической теории информации в их общей формули¬ 
ровке верны лишь с точностью до членов вида 0(1)» [Кол¬ 
могоров, 1969]. Поэтому (Р1) и (Р2) заменяются на (А1) 
и (А2): 

0<К(у\у)^0, (А1) 

( Д 2) 

Неочевидные изменения состоят в том, что в алгоритмиче¬ 
ских аналогах равенств (РЗ) и (Р4) появляется логарифми¬ 
ческая поправка: 

I (х:у) = I (у:х) + 0 (Іо&К «х, у»), (АЗ) 

Н «х, у» = Н (х) + Н (у\х) + 0 (1о& К «*, у»). (А4) 

Шенноновский подход можно следующим образом при¬ 
менить к индивидуальному слову А: можно рассмотреть 
это А как одно из значений некоторой случайной величи- 
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ны 5 и вычислить энтропию Б> причем I естественно задать 
так, чтобы А было «типичной» ее реализацией. Например, 
можно считать, что буквы слова А независимы и имеют ве¬ 
роятности, равные частотам их появления в А. 

Пусть рассматривается слово длины к в «-буквенном 
алфавите. Тогда & имеет п к значений и Я (Р в к раз больше, 
чем энтропия Я(гі) случайной величины д, у которой зна¬ 
чениями служат буквы алфавита, а вероятностями этих 
значений — частоты букв в слове А . Энтропию Н—Н (г|) 
естественно называть шенноновской удельной энтропией 
слова А. Ее содержательный смысл проявляется, например, 
в следующем. Рассмотрим какой-либо способ побуквенного 
кодирования слов в «-буквенном алфавите посредством дво¬ 
ичных слов, позволяющий однозначно восстанавливать 
слова по их кодам. Если теперь заменить в А каждую бук¬ 
ву на ее код из 3, то все А в целом также заменится на не¬ 
которое слово из 3 длины к'-. Отношение Ь—к'Ік есть «ко¬ 
эффициент удлинения». 

Известно (см., например, [Прохоров, 1973], [Левенштейн, 
1974, теорема 8]), что всегда Ѵ^-И и что возможен такой 
способ кодирования, при котором І^Я+1. Поэтому число 
к • Я можно считать « истинной двоичной длиной» слова А , или 
его шенноновской сложностью (более точно — шенноновской 
1-сложностью; если кодировать не отдельные буквы, а 
сразу пары соседних букв, учитывая частоты двубуквенных 
сочетаний, мы приходим к шенноновской 2-сложности и 
т. д.). Удельная шенноновская энтропия слова А показы¬ 
вает, таким образом, долю шенноновской сложности, при¬ 
ходящейся на одну букву слова, и ее естественно сравни¬ 
вать с удельной колмогоровской энтропией того же слова. 
Имеет место следующее основное неравенство (см. [Звон- 
кин, Левин, 1970, теорема 5.1), [Барздинь, 1977])і 
К (А) ^ ц | с п 1о§ 2 к 
~к~^= П ^ к ’ 

где Я — удельная шенноновская энтропия слова А, зна¬ 
менатель к есть длина слова, а константа с п зависит лишь 
от числа букв в алфавите и от выбранного при определе¬ 
нии энтропии оптимального способа описания. 

Другой результат о связи колмогоровской и шеннонов¬ 
ской энтропий относится к начальным отрезкам случайных 
последовательностей. Пусть дана случайная величина |, 
значениями которой являются буквы данного конечного 
алфавита, причем для каждой буквы вероятность принять 



ее в качестве значения есть вычислимое (например, рацио¬ 
нальное) число. Рассмотрим пространство всех бесконечных 
последовательностей, составленных из букв рассматривае¬ 
мого алфавита; в предположении, что буквы появляются 
независимо, Е задает вычислимую меру на этом прост¬ 
ранстве (бернуллиеву в случае двубуквенного алфавита). 
Среди последовательностей выделяются случайные (по 
Мартин-Лёфу или, что эквивалентно, по Колмогорову, см. 
предыдущий параграф). Шенноновскую энтропию #(&) 
можно трактовать как «удельную шенноновскую энтропию 
случайной последовательности». Оказывается, что для лю¬ 
бой случайной последовательности (о удельная колмого¬ 
ровская энтропия — — начальных отрезков этой последо¬ 

вательности стремится к Н (|) (см. [Звонкин, Левин, 1970, 
формула (5.18)], [Агафонов, 1975, § 5.5, с. 134], [Бар- 
здинь, 1977]). 

§ 2.8. Оценки сложности решения отдельных задач 

2.8.0. В этой области теории алгоритмов естественно 
выделяются задачи получения верхних и задачи получе¬ 
ния нижних оценок. Методы решения задач этих двух 
категорий совершенно различны. 

2.8.1. Верхние оценки. Верхняя оценка строится сле¬ 
дующим образом. Указывается неформальный алгоритм 
вычисления требуемой функции /\ Затем этот алгоритм фор¬ 
мализуется в виде алгоритма вычисления на подходящей 
модели и доказывается, что сложность (время или емкость) 
вычисления для этого алгоритма не превосходит значения 
подходящей функции <р при всех значениях аргумента. Эта 
функция и объявляется верхней оценкой сложности вычис¬ 
ления функции /. 

Естественно желать получать такие оценки сложности 
вычисления, которые соответствуют вычислительной прак¬ 
тике. Обращаясь к обсуждавшимся в § 1.16 оценкам «с точ¬ 
ностью до», мы обнаруживаем, что столь широко понимае¬ 
мые оценки не вполне удовлетворительны с практической 
точки зрения и могут рассматриваться только как грубые 
приближения к реальному положению вещей. При этом 
оценки «с точностью до мультипликативной константы» 
хуже оценок «с точностью до аддитивной константы» и т. д. 

На первый взгляд может показаться, что получить «аб¬ 
солютные оценки» и невозможно, ведь имеет место теорема 
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о линейном ускорении, см. § 1.7. Дело, однако, в том, что 
при «ускорении» вычисления, даваемом этой теоремой, рас¬ 
тет сложность каждого шага вычисления. Если же ограни¬ 
чить сложность отдельного шага вычислительного процесса, 
то теорема о линейном ускорении уже неприменима. И дей¬ 
ствительно, в принципе возможны абсолютные оценки вре¬ 
мени вычисления, когда последнее понимается как сумма 
длительностей отдельных шагов (см. § 1.6), причем эти дли¬ 
тельности оцениваются сложностью соответствующих шагов; 
конечно, именно такие оценки имеют наибольшее практи¬ 
ческое значение. 

С точки зрения времени вычисления самыми простыми 
являются функции, время (т. е. число шагов) вычисления 
которых совпадает с точностью до мультипликативной кон¬ 
станты с размером аргумента и, более того, число шагов ра¬ 
боты машины между двумя последовательными сдвигами 
входной головки ограничено некоторой константой (мы 
считаем, что вычисление происходит на многоленточных 
машинах Тьюринга с безвозвратной входной лентой (см. 
[Рабин, 1963], [Розенберг, 1967]). Такое вычисление назы¬ 
вается вычислением в реальное время. Как выяснилось в по¬ 
следние годы, среди задач, решаемых в реальное время, име¬ 
ются многие интересные задачи, связанные с идентифика¬ 
цией слов (в частности, задача распознавания симметрии 
слова, см. [Слисенко, 1977]); правда, для наиболее важных 
из этих задач построенные алгоритмы не являются алгорит¬ 
мами колмогоровского типа (см. [Слисенко, 1977а], [Сли¬ 
сенко, 1978]). Представляет интерес переход от таких 
алгоритмов к алгоритмам Колмогорова. 

Следующий класс образуют полиномиальные верхние 
оценки времени вычисления, т. е. оценки, в которых время 
ограничено каким-либо полиномом от длины или нормы 
входа. Три примера множеств, распознаваемых за полино¬ 
миально ограниченное время, были уже приведены в § 1.7 
при обсуждении класса Р. Большинство получаемых для 
функций из класса Р оценок — это оценки «с точностью 
до», как правило, с точностью до мультипликативной кон¬ 
станты. В этом отношении характерны названия публика¬ 
ций, относящихся к упомянутым примерам: в этих назва¬ 
ниях встречаются выражения «алгоритм с линейным вре¬ 
менем», «менее чем кубическое время», «полиномиальный 
алгоритм». 

Оценки «с точностью до» иногда порождают парадоксаль¬ 
ную ситуацию. Для какой-нибудь задачи дальнейший про- 
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гресс в направлении нахождения более «эффективного алго¬ 
ритма» может состоять в переходе от алгоритма с верхней 
оценкой времени работы Сі/г а * к алгоритму с верхней оцен¬ 
кой времени работы с 2 п“*, где а 2 <аі. Однако при этом с г 
может быть настолько больше с 1( что для всех практически 
мыслимых аргументов старый алгоритм эффективней ново¬ 
го. Поучительна в этом отношении ситуация с одной из 
важных верхних оценок — оценкой сложности умножения 
матриц. (Чтобы не загромождать изложение, мы будем го¬ 
ворить о числе арифметических операций, но картина для 
вычислений на представительной модели колмогоровского 
типа аналогична.) Классический алгоритм дает оценку 
СіП 3 для матриц /г-го порядка. Алгоритм Штрассена — оцен¬ 
ку СіП і,іх (см. [Ахо, Хопкрофт, Ульман, 1974, п. 6.2]). Ана¬ 
лиз работы этого алгоритма показывает, что при некоторой 
организации вычислений его использование дает выгоду 
по сравнению с классическим алгоритмом, начиная с матриц 
14-го порядка (см. [Фишер, 1974]). В последние годы были 
предложены алгоритмы, дающие возможность понизить 
показатель от 2,81 до (приблизительно) 2,5, однако одно¬ 
временно мультипликативная константа в полученных оцен¬ 
ках растет таким образом, что «эффективный» метод оказы¬ 
вается лучше классического только для матриц астрономиче¬ 
ского порядка (заведомо большего ІО 10 ). Конечно, можно 
надеяться, что новые методы содержат продуктивные мате¬ 
матические идеи, которые в дальнейшем смогут привести 
к получению действительно осмысленных с прикладной точ¬ 
ки зрения алгоритмов. 

Что касается емкости вычисления, то с прикладной точ¬ 
ки зрения наибольший интерес представляют полиномиаль¬ 
ные (от длины аргумента) оценки. Однако если такая оцен¬ 
ка не сопровождается полиномиальной же оценкой времени 
вычисления, то с практической точки зрения и она является 
сомнительной, ведь полиномиальная оценка емкости авто¬ 
матически дает (см. § 1.6) лишь экспоненциальную оценку 
времени. Для многих важных функций их вычисление может 
быть осуществлено так, что емкость ограничена какой-либо 
степенью логарифма длины аргумента, а время (при том 
же вычислении) ограничено полиномом. 

По-видимому, верхние оценки сложности, не мажорируе¬ 
мые полиномами (т. е. экспоненциальные и тому подобные 
оценки) следует рассматривать не как практически значи¬ 
мые, а как (вместе с соответствующими нижними оценками) 
позволяющие о чисто теоретической точки зрения расклас- 
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сифицировать решимые алгоритмические проблемы по «сте¬ 
пени сложности решения». О такой классификации для алго¬ 
ритмических проблем теории групп см. [Каннонито, Гаттер- 
дам, 1973]. 

2.8.2. Нижние оценки. Как мы уже отмечали, ситуация 
с нижними оценками принципиально отличается от ситуа¬ 
ции с верхними. Установить нижнюю оценку — это значит 
доказать, что никакой алгоритм вычисления на данной мо¬ 
дели не имеет сложности вычисления меньше заданной 
функции ф. Основным методом получения нижних оценок 
является диагонализация (о других подходах см. [Слисен- 
ко, 1981, гл. 3, § 2]). Примерами использования метода диа- 
гонализации для построения множеств с заданными нижни¬ 
ми оценками сложности являются теоремы об иерархии 
(см. § 1.7). 

Диагональные конструкции были использованы также 
при получении нижних оценок для сложности разрешения ' 
логических теорий (см. [Ферранте, Раков, 1979]). В качестве 
возможных оценок рассматривались функции от длины 
формулы. Оказалось, что для многих (можно сказать, для 
большинства) логических теорий имеет место экспоненци¬ 
альная нижняя оценка сложности (все равно какой, вре¬ 
менной или емкостной) разрешения. А для такой теории, 
как слабая монадическая теория следования второго по¬ 
рядка, дело обстоит «еще хуже». Названная теория есть 
теория структуры с носителем N с единственной сигнатур¬ 
ной функцией — прибавлением единицы, но зато с допуще¬ 
нием кванторов не только по натуральным числам, но и по 
конечным множествам натуральных чисел. Хотя для этой 
теории и существует разрешающий (т. е. распознающий ис¬ 
тинность формул) алгоритм, в практическом смысле она 
оказывается неразрешимой: действительно, как показано 
в [Мейер, 1975], для любого разрешающего алгоритма его 
(все равно какая) сложность не мажорируется никакой 
.2 п 

сверхэкспонентой 2" с фиксированным числом этажей. 
Аналогичный результат имеет место для элементарной тео¬ 
рии свободной группы: хотя вопрос о разрешимости этой 
теории остается открытым, она «практически неразрешима»: 
для нее не существует разрешающего алгоритма со сверх¬ 
экспоненциальной (с фиксированным числом этажей) верх¬ 
ней оценкой времени или емкости (см. [Семенов, 1980]). 
Популярный очерк решимых массовых проблем, не обла- 
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дающих, однако, каким бы то ни было «практическим» ре- 
шающим алгоритмом, см. в [Стокмейер, Чандра, 1979]. 

В теории сложности все же есть нижние оценки, полу¬ 
ченные не диагональным методом. Это, например, квадра¬ 
тичные нижние оценки для задач типа идентификации слов 
при условии, что в качестве вычислительной модели берется 
одноленточная машина Тьюринга. Для задачи распознава¬ 
ния симметрии слов такая оценка найдена в [Барздинь, 
1965]. Другой пример — это умножение чисел при условии, 
что очередной разряд результата должен выдаваться «доста¬ 
точно рано» (см. [Патерсон, Фишер, Мейер, 1974]). Отно¬ 
сительно емкости отметим (упоминавшуюся в § 1.7) нижнюю 
оценку для емкости распознавания множеств, не являю¬ 
щихся распознаваемыми с нулевой емкостью. Интересно 
было бы получить соответствующую оценку для вычисления 
функций (а не только для предикатов) и, с другой стороны, 
для емкости порождения (а не только для разрешения) 
множеств. При этом, конечно, надо соответствующим обра¬ 
зом определить эту емкость порождения. С некоторой точки 
зрения все перечисленные «недиагональные» оценки имеют 
«негативный» смысл — они показывают, что рассматривае¬ 
мая вычислительная модель недостаточно универсальна 
с точки зрения сложности вычисления. 

Заметим, наконец, что соображения об оценках «с точ¬ 
ностью до», высказанные в связи с верхними оценками, име¬ 
ют не меньший смысл и в приложении к нижним оценкам. 

§ 2.9. Влияние теории алгоритмов иа алгоритмическую 

практику 

2.9.0. В настоящее время большинство явно сфор¬ 
мулированных и используемых человеком в его деятель¬ 
ности алгоритмов — это программы для ЭВМ (см. [Кнут, 
1974], [Кнут, 1974а]). О масштабах «алгоритмической» дея¬ 
тельности человечества важно судить по возникающим в ней 
организационным проблемам (см. [Брукс, 1975]). Таким 
образом, программирование — это алгоритмическая прак¬ 
тика, теоретическое программирование — это (при широком 
понимании термина) вся теория алгоритмов (например, 
теорему Гёделя о неполноте можно рассматривать как тео¬ 
рему теоретического программирования, ср. [Глушков, 
1979]). 

Общепринято, однако, другое понимание термина «тео¬ 
ретическое программирование» — как области теории алго- 
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ритмов, концентрирующейся вокруг взаимоотношения про¬ 
граммы как чисто синтаксического, неинтерпретированного 
объекта и содержания (смысла, значения) программы. Ко¬ 
нечно, для теоретического программирования характерен 
интерес к порожденным практикой темам, которых не ка¬ 
салась классическая теория алгоритмов, таким как парал¬ 
лельное программирование (см. (Котов, 1974]) или структу¬ 
ры данных (см. [Скотт, 1970]). Тем не менее «общая часть» 
теоретического программирования и теории алгоритмов 
велика, и классическая теория алгоритмов оказала бес¬ 
спорное влияние на программирование. Это влияние, од¬ 
нако, состояло не в использовании каких-либо теорем, оно 
носило скорее идейный характер. Попытаемся проследить, 
как оно происходило, перечислив соответствующие резуль¬ 
таты и понятия общей теории алгоритмов. 

2.9.1. Общее понятие алгоритма и возможность его фор¬ 
мализации. В вычислительной практике важную роль сыг¬ 
рало осознание того, что любая вычислительная машина 
(если игнорировать физические ресурсы) может вычислять 
любую вычислимую функцию и никакая машина не может 
вычислять невычислимую. Также важную, хотя и не всегда 
однозначно полезную роль играло утверждение о том, что 
все задачи, решаемые человеком, могут быть решены под¬ 
ходящими алгоритмами, в частности на ЭВМ. 

2.9.2. Существование нерешимых алгоритмических про¬ 
блем в математике и нерешаемость многих естественно воз¬ 
никших проблем. О некоторых задачах стало заранее извест¬ 
но, что искать их полное и точное решение безнадежно и 
нужно вырабатывать реалистический подход, основанный 
на отказе от полноты, абсолютной достоверности или чего-то 
еще. Конечно, разделение задач на решимые и нерешимые 
имело и отрицательные последствия, возникло искушение 
рассматривать всякую решимую задачу как практически 
решаемую, почти решенную, если не сегодня, то при даль¬ 
нейшем прогрессе вычислительной техники. 

2.9.3. Появление различных понятий сложности вычис¬ 
ления и порождения. Возможность строгого абстрактного 
определения того, что такое сложность вычисления, стиму¬ 
лировало разработку эффективных алгоритмов и дало воз¬ 
можность их объективного сравнения (см. [Слисенко, 1981]). 
Большое практическое значение имело определение класса 
МР и доказательство полиномиальной эквивалентности 
многих «переборных» задач. Это, наряду с экспоненциаль¬ 
ными нижними оценками, разрушило иллюзию, о которой 
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говорилось в предыдущем абзаце; выяснилось, что одного 
только существования алгоритма, решающего ту или иную 
массовую проблему, далеко не достаточно для практики. 
Тем самым еще раз подтвердилась важность нестандартных 
(эвристических, приближенных и т. д.) подходов (см. [Ра¬ 
бин, 1974]). С другой стороны, теоретические алгоритмы, 
для которых были доказаны «хорошие» полиномиальные 
верхние оценки сложности, нашли практические прило¬ 
жения. 

2.9.4. Неалгоритмическое описание вычислимых функ¬ 
ций (р-рекурсивные функции, исчисление Эрбрана — Гёде¬ 
ля, исчисление ^-конверсии, неподвижные точки вычисли¬ 
мых операторов и т. д.; обзор и классификацию таких опи¬ 
саний см. в [ЕршовА., 1982а]). Неалгоритмическое (не¬ 
процедурное) описание вычислимых функций оказалось важ¬ 
ным средством программирования. Начиная о языка лисп, 
соответствующие конструкции вошли во многие языки про¬ 
граммирования, кроме того, неалгоритмическое описание 
является основой многих формальных определений семан¬ 
тики программ. 

2.9.5. Вычислительные и порождающие модели. Основ¬ 
ную роль в программировании играют не сами представи¬ 
тельные модели, а их (уже непредставительные) модифика¬ 
ции и ограничения. Типичные примеры таких ограни¬ 
чений — магазинные автоматы и контекстно-свободные 
грамматики. Контекстно-свободные грамматики широко 
использовались для задания синтаксиса языков програм¬ 
мирования, начиная с алгола-60; при описании алгола-68 
понадобился более общий вид исчислений — грамматики 
ван Вейнгаардена. 

Именно непредставительность, ограниченность моделей 
и позволяет в какой-то степени использовать их при созда¬ 
нии эффективных алгоритмов обработки программ, прежде 
всего алгоритмов трансляции. Разнообразие различных 
представительных вычислительных моделей, которое с точ¬ 
ки зрения общей теории алгоритмов может показаться из¬ 
лишним, оказывается весьма осмысленным с практической 
точки зрения; ведь для практики вопрос о степени удобства, 
с которой тот или иной алгоритм записывается на языке 
программирования, оказывается жизненно важным. Рост 
числа языков программирования в конце 60-х — начале 
70-х годов (речь идет о сотнях и даже тысячах языков, см. 
[Семенов, Семенова, 1974]) позволял говорить даже о «вави¬ 
лонской башне» в программировании. 
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2.9.6. Трактовка программ как объектов вычисления. 
Фон Нейман был первым, кто ввел это фундаментальное 
открытие теории алгоритмов в алгоритмическую практику 
(см. [Нейман, 1963]). Принцип хранимой и модифицируемой 
программы стал одной из основ системного программирова¬ 
ния. Неотъемлемыми частями каждой ЭВМ являются ком¬ 
пилятор и другие компоненты операционной системы, ори¬ 
ентированные на модификацию и выполнение программ 
потребителей. Машина с действующим интерпретатором 
есть в точности универсальный алгоритм в смысле теории 
алгоритмов. Дальнейшим развитием этих идей явилась кон¬ 
цепция смешанного вычисления (см. [ЕршовА., 1982]), 
позволяющая о единой точки зрения взглянуть на многие 
кажущиеся различными способы обработки программ и 
данных. 

2.9.7. Рассмотрение программ как объектов порождения 
(как и результаты о логических исчислениях) стимулирова¬ 
ло развитие формальных систем, предназначенных для до¬ 
казательства утверждений о программах (см. [Хоор, 1969], 
[Непомнящий, 1979]). Важнейший класс таких утвержде¬ 
ний образуют утверждения о так называемой правильности 
программ, т. е. о том, что рассматриваемая программа «де¬ 
лает, что надо». 

2.9.8. Смешанные вычисления. Поучительным примером 
взаимодействия теории алгоритмов и вычислительной прак¬ 
тики является развитая А. П. Ершовым и его учениками 
теория смешанных вычислений [Ершов, 1982], [Ершов, 
1984]. Мы коснемся самого начала этой теории. Начнем 
с двух замечаний. 

1. Пусть аргументами алгоритма служат пары (х, у). 
Тогда фиксация х дает алгоритм о аргументом у. 

2. Программа алгоритма, получаемого фиксацией х, 
может быть эффективно построена по программе первона¬ 
чального алгоритма, если используемый способ программи¬ 
рования — главный. 

Эти два замечания содержательной теории алгоритмов 
составляют так называемую 8— т —п-теорему. О ней мы 
уже говорили в п. 1.14.3. Отметим, что фиксация одного 
члена пары может рассматриваться как типичный пример 
сужения области исходных данных. Получаемый при этом 
алгоритм называется специализацией исходного. 

5 — т —я-теорема может рассматриваться как теоретиче¬ 
ское подтверждение идеи автоматизации программирова¬ 
ния, Действительно, как мы видим, имеется автоматический 
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способ получать из общего алгоритма его специализацию. 
Заметим, однако, что формулировка теоремы не дает кон¬ 
кретного рецепта специализации. Попытка же извлечь ал¬ 
горитм специализации из обычного доказательства 5— т — п- 
теоремы, конечно, не приводит к удовлетворительному ре¬ 
зультату. Это доказательство гласит: «Вот требуемая про¬ 
грамма: образуй из хи у пару и примени к ней первоначаль¬ 
ный алгоритм». В то же время содержательно понимаемая 
цель специализации состоит в получении алгоритма, более 
эффективного чем первоначальный, общий, от двух аргу¬ 
ментов. Смысл ограничения области аргументов как раз и 
состоит в получении более эффективного (т. е. более эконом¬ 
ного по времени и емкости, с более короткой программой 
и т. д.) алгоритма. 

Чтобы найти теоретические основания для специализа¬ 
ции, приводящей к более эффективным алгоритмам, уже 
недостаточно ограничиваться качественной теорией алго¬ 
ритмов. Нужно фиксировать какой-либо язык программи¬ 
рования. Возьмем, например, простой естественный язык, 
в котором программы строятся из элементарных команд и 
проверок с помощью основных конструкций Ьтруктурного 
программирования: последовательного выполнения, раз¬ 
ветвления и повторения. С текстом программы на таком язы¬ 
ке (конструктивным объектом) можно выполнять различные 
операции. Можно, скажем, подставить в этот текст извест¬ 
ное значение входной переменной, заметить, что в силу 
ложности какой-либо проверки некоторую команду не по¬ 
надобится выполнять и выкинуть эту команду. Другой 
вариант — все аргументы функции оказались известны, 
можно вычислить значение функции и упростить выражение, 
ее содержащее. Операции над текстом программы, о которых 
мы сейчас говорили: устранение фиктивной ветви вычисле¬ 
ния и подстановка значения функции, относятся к числу так 
называемых редукций. Как мы видим, при редукции текст 
программы в каком-то смысле, упрощается. С другой сто¬ 
роны, программа может содержать конструкцию повторе¬ 
ния. В этом случае бывает полезно преобразовать текст 
команды повторения в более длинный — развернуть его, 
выделив первое повторение, за которым опять пойдет коман¬ 
да повторения. Усложнение текста программы при развер¬ 
тывании может компенсироваться последующей редукцией. 

Процессы редукции и развертывания задают очень про¬ 
стое и естественное исчисление со входом, причем на вход 
подается первоначальная программа с заданными значе- 
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ниями некоторых переменных. Процесс специализации 
представляется как вывод в исчислении. Результатом рабо¬ 
ты исчисления со входом является специализация исход¬ 
ной программы. В частном случае специализация может 
состоять из одного объекта — результата работы программы. 

Всякий процесс перехода от алгоритма к его специали¬ 
зации с использованием описанных операций редукции и 
развертывания называется смешанным вычислением. Единое 
рассмотрение процессов вычисления, компиляции (перевода 
на машинный язык) и выполнения программ явилось одним 
из мощных принципов современного программирования, 
в какой-то мфе позволяющим устранить границу между 
человеческим — «предэкранным» миром и маслинным — 
«заэкранным» [Кушниренко и др., 1985], [Бетелин, 1985]. 

2.9.9. Методы программирования. Здесь имеются в виду 
методы построения алгоритмов и доказательства их правиль¬ 
ности, появившиеся внутри теории алгоритмов. Наиболее 
показателен в этом отношении пример структурированного 
программирования. Основные операторы образования стру¬ 
ктурированных программ (последовательное выполнение, 
разветвление, повторение) были введены в начале 50-х 
годов при описании нормальных алгорифмов Маркова (см. 
[Марков, 1954, гл. III], [Нагорный, 1977]). Одновременно 
были даны нетривиальные примеры индуктивного доказа¬ 
тельства правильности программ, построенных о помощью 
этих операторов (в частности, программы универсального 
алгоритма, т. е. интерпретатора). В абстрактной, алгебраи¬ 
ческой форме операторы структурированного программиро¬ 
вания были введены в системах алгоритмических алгебр 
Глушкова; одновременно были рассмотрены содержатель¬ 
ные с точки зрения практического программирования при¬ 
меры преобразования программ и доказательства их пра¬ 
вильности (см. [Глушков, 1965]). В 70-е годы структуриро¬ 
ванное программирование стало одним из инструментов 
практического программиста. Показательные примеры вза¬ 
имодействия алгоритмической теории и алгоритмической 
практики в области методов и языков программирования 
прослеживаются в [ЕршовА., 1977], [Лавров С., 1984], 
[Тыугу, 1984]. 

2.9.10. Программирование как вторая грамотность. 

«...Мы сами живем в мире программ, подчас не сознавая 
этого» [Ершов А., Звенигородский, 1979, с. 47]. Убыстряю¬ 
щееся развитие вычислительной техники и программиро¬ 
вания будет включать в алгоритмическую практику (кото- 
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рая, в свою очередь, будет составлять все большую часть 
разумной деятельности человека) все более широкий круг 
идей теории алгоритмов (и требовать от теории алгоритмов 
новых открытий). 

Алгоритмические концепции играют в процессе обуче¬ 
ния и воспитания современного человека фундаментальную 
роль, сравнимую лишь с ролью письменности (отсюда пред¬ 
ложенный А. П. Ершовым термин «вторая грамотность», 
см. [ЕршовА., Звенигородский, 1979], [ЕршовА., 1981а]). 
Возможность обучения учащихся начальной школы про¬ 
граммированию на базе абстрактных вычислительных моде¬ 
лей (не только для подготовки их к будущей профессии, 
но и для развития способности к формальному мышлению) 
обсуждается в [Успенский, 1979, гл. 1, §5]. 

Согласно [ЕршовА., Звенигородский, 1979, с. 48], 
«программирование... есть способность выразить любой 
«правильный» процесс средствами, доступными для передачи 
машине», т. е. прежде всего алгоритмическими средствами. 
Поэтому «мы естественно приходим к проблеме фундамента- 
лизации программирования, выделения в нем некоторых 
«натуральных» сущностей» [ЕршовА., 1981а, с. 81]. Систе¬ 
ма «натуральных сущностей» программирования формиру¬ 
ется под сильным влиянием системы основных понятий тео¬ 
рии алгоритмов и исчислений (впрочем, и эта последняя 
система испытывает влияние первой). «Сумма знаний по 
этим вопросам должна подвергнуться тщательному кон¬ 
цептуальному анализу и в объединении с математическими 
и лингвистическими концепциями стать фундаментальной 
компонентой общего образования» [ЕршовА., 1981а, с. 18]. 

2.9.11. Математическая логика и вычислительная тех¬ 
ника. Один из самых выдающихся программистов нашего 
времени Э. Дейкстра в недавно опубликованной статье 
[Дейкстра, 1986] называет блестящим предвидением следую¬ 
щее высказывание другого известного специалиста, автора 
языка лисп Дж. Маккарти, сделанное еще в 1967 г.: «Ра¬ 
зумно ожидать, что связи между вычислительной техникой 
и математической логикой окажутся столь же плодотвор¬ 
ными в следующем столетии, какими были связи между 
математическим анализом и физикой в столетии предыду¬ 
щем». Еще одна попытка анализа этих связей предпри¬ 
нята в [Семенов, Успенский, 1986]. 



ДОПОЛНЕНИЕ 

О ВЕРОЯТНОСТНЫХ АЛГОРИТМАХ 
(КАК ИСПОЛЬЗОВАНИЕ СЛУЧАЙНОСТИ 
ПОЗВОЛЯЕТ УКОРАЧИВАТЬ ВЫЧИСЛЕНИЯ) 

Настоящее Дополнение посвящено замечательным эффектам, воз¬ 
никающим при вмешательстве случая в детерминированный алгоритми¬ 
ческий процесс. Выясняется, что такое вмешательство можно «обра¬ 
тить во благо». Дополнение написано так, чтобы заинтересовавшийся 
данной проблематикой читатель (например, специалист по теории ве¬ 
роятностей) мог читать его независимо от основного текста книги. 

Дополнение состоит из трех параграфов. Первый имеет вводный 
характер. Во втором дается обзор главных результатов, связанных 
о вычислениями на вероятностных машинах. В третьем параграфе 
приводятся необходимые формальные определения. 


§ Д. 1. Предварительные замечания 

В нашем повседневном поведении мы все время сознательно или бес¬ 
сознательно пренебрегаем маловероятными событиями и получаем от 
этого заметный выигрыш. Трудно даже вообразить, во что превратилась 
бы наша жизнь, если мы постоянно учитывали бы все теоретически воз¬ 
можные, но маловероятные случаи. Математическая теория этого фун¬ 
даментального эффекта — наличия выигрыша от пренебрежения малы¬ 
ми вероятностями — в его (эффекта) полном объеме находится за пре¬ 
делами возможностей современной науки. Однако можно попытаться 
начать со сравнительно простых моделей. Вот одни пример. 

Предположим, что иа расстоянии одного шага от иас либо влево, 
либо вправо (ио мы не зиаем, влево или вправоі) положена записка с 
неизвестным нам числом. Спрашивается, сколько надо сделать шагов, 
чтобы узнать, четно оно или нечетно? Ясно, что гарантировать ответ 
мы можем, только имея возможность сделать три шага (один влево и, 
если там нет записки, два вправо). Если нас устраивает ответ с вероят¬ 
ностью 1/2, достаточно нуля шагов: не двигаясь с места, мы прибегаем к 
жребию и получаем результат, достоверный с вероятностью 1/2. Огра¬ 
ничим себя одним шагом. Оказывается, мы можем выбрать такую стра¬ 
тегию, что при любом реальном положении записки 
вероятность правильного ответа будет 3/4. Для этого надо поступить так: 
жребием определяем, идти нам влево или вправо, и если не обнаружи¬ 
ваем записки, снова прибегаем к жребию—на этот раз, чтобы провозгла¬ 
сить четность или нечетность. 

Приведенный пример показывает, что вероятностные (или стоха¬ 
стические) алгоритмы , т. е. алгоритмы, предусматривающие возмож- 
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ность—на определенных этапах своей работы—обращения к жре¬ 
бию, могут давать экономию во времени работы (т. е. в числе шагов) 
за счет замены абсолютной достоверности результата достоверностью с 
высокой вероятностью. Конечно, вероятность 3/4, полученная в при¬ 
мере, этоеще не очень высокая вероятность, но это только пример: более 
сложные конструкции позволяют увеличивать эту вероятность. 

Сказанное имело целью обосновать ту мысль, что разработка ма¬ 
тематической теории вероятностных алгоритмов — это чрезвычай¬ 
но актуальная задача. Названная теория затрагивает глубинные проб¬ 
лемы поведения людей и машин и имеет практические перспективы. 

Как и в обычной теории алгоритмов, в теории вероятностных алго¬ 
ритмов можно выделить дескриптивную (качественную) и метрическую 
(сложностиую) стороны. Зарождение дескриптивной теории вероятност¬ 
ных алгоритмов можно отнести к 1956 г,, когда Шеннон с соавторами 
опубликовал известную статью [Леу и др., 1956]. В этой статье устанав¬ 
ливалось, что при разумных определениях посредством вероятностных 
алгоритмов можно вычислить в точности тот же запас функций, что и 
посредством обычных, детерминированных алгоритмов. Поэтому прив¬ 
лечение вероятности не привносит чего-либо нового в дескриптивную 
теорию алгоритмов. Иначе обстоит дело в метрическом случае. Уже в 
первых публикациях по метрической теории вероятностных алгоритмов 
[Гилл, 1974], [Трахтенброт, 1974] был продемонстрирован выигрыш 
во времени вычисления, который можно получить, эксплуатируя случай- 
вость при построении алгоритмов. В первой из этих публикаций 
построены такие язык Ь и функция 1(х), что 1) для любого е>0 су¬ 
ществует вероятностная машина Тьюринга, распознающая і с веро¬ 
ятностью 1—е за время і(х)\ 2) если і' (х) — время работы детерминиро¬ 
ванной машины Тьюринга, распознающей ь, то для бесконечного 
множества х выполняется /'(*)> ((х) (точные определения см. в § П.З). 
Во второй построена пара языков, отделимых на вероятностных маши¬ 
нах Тьюринга за время сопзЬ/і-1о§ п и таких, что их отделение на де¬ 
терминированных машинах Тьюринга требует времени сопзЬя 2 . 

По-видимому, 1974 г. и следует считать годом зарождения метри¬ 
ческой теории вероятностных алгоритмов. Эту теорию вряд ли можно 
считать уже сформировавшейся: процесс ее становления совершается 
на наших глазах. Решающий вклад в этот процесс внесли исследования 
латвийского математика Р. В. Фрейвалда. 

Могут возразить, что еще в 1944 г. фон Нейман и Улам начали при¬ 
менять для решения на ЭВМ прикладных задач метод статистических 
испытаний, он же метод Монте-Карло. Как известно (см. [Марчук, 
1976], [Ермаков, 1971], этот метод использует понятие случайности для 
осуществления вычислений. Но ведь и первые алгоритмы были построе¬ 
ны еще Евклидом и ал-Хорезми, тогда как общее понятие алгоритма и 
теория алгоритмов появились лишь в двадцатом веке. Кроме того, на 
концептуальном уровне методы современной теории вероятностных 
алгоритмов отличаются от методов Монте-Карло по крайней мере в 
следующих трех аспектах. 

Во-первых, вероятностные алгоритмы Монте-Карло лучше детер¬ 
минированных (т. е. не использующих понятие случайности) алгорит¬ 
мов, известных к данному моменту, но ни про один из них не доказано, 
что он лучше всех мыслимых детерминированных алгоритмов. 
В современной теории строятся такие вероятностные алгоритмы, кото¬ 
рые именно лучше всех мыслимых детерминированных, приво¬ 
дящих к тем же результатам. 

Далее, во-вторых, методы Монте-Карло применяются в обстановке 
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непрерывной среды, и речь всегда идет о приближенном вычислении. 
Среда, с которой мы будем иметь дело — всегда дискретна, и речь всегда 
идет о совершенно точных вычислениях. Более конкретно, рассматри¬ 
ваются вычисления, на вход которых подаются слова какого-либо фикси¬ 
рованного алфавита, а на выходе получаются нуль или единица. 

Наконец, в-третьих, в методе Монте-Карло применение вычисли¬ 
тельных машин, как это ни парадоксально,— не главное. Главное — 
это некоторый физический процесс, осуществляемый по законам стати¬ 
стики (см. (Ченцов, 1976]), а машины используются лишь как удобное 
средство для моделирования этого процесса. (Пример: вычисление 
определенного интеграла методом Монте-Карло состоит в моделировании 
на машине следующего физического процесса. На мишени рисуется 
геометрическая фигура, площадь которой выражается искомым интег¬ 
ралом, и далее мишень бомбардируется дробью — достаточно мелкой, в 
достаточно большом количестве и с равномерным распределением веро¬ 
ятности попадания.) В работах Фрейвалда и его предшественников аб¬ 
страктные вычислительные машины служат не средством моделирования 
непрерывных физических процессов, а исполнителями хитроумных 
алгоритмов, специально разработанных авторами для достижения своих 
целей, т. е. для экономного вычисления рассматриваемых функций. 

В работах по вероятностной теории — как это и общепринято в 
математической теории алгоритмов — используются не реальные, а 
абстрактные, идеализированные вычислительные устройства. В ка¬ 
честве таких устройств фигурируют устройства двух типов: 1) конечные 
автоматы и 2) машины Тьюринга. 

Понятие конечного автомата отражает в абстрактной форме пред¬ 
ставление об исполнителе алгоритма с раз и навсегда ограниченным 
объемом памяти. Понятие машины Тьюринга отражает представление об 
исполнителе с конечным в каждый отдельный момент, но потенциально 
неограниченным объемом памяти. Обычные конечные автоматы и ма¬ 
шины Тьюринга работают детерминированно; в вероятностной теории 
наряду о такими обычными устройствами рассматриваются также и их 
вероятностные аналоги. 

Отличие вероятностного устройства от детерминированного состоит 
в том, что программа предусматривает специальную команду: «обра¬ 
тись к жребию». От результата обращения к жребию зависит, какая 
команда будет исполняться на следующем шаге. Сам жребий можно 
представлять себе как результат датчика случайной буквы, выбираемой 
из конечного алфавита; этот датчик работает по схеме независимых 
испытаний с равновероятными исходами. Достаточно ограничиться 
двубуквениым алфавитом: все теоремы из § Д.2 остаются при этом спра¬ 
ведливыми. 

Настоящее Дополнение посвящено проблематике, связанной с ве¬ 
роятностными машинами Тьюринга. В силу сказанного, работу такой 
машины можно представлять себе следующим образом. Имеются две 
конкурирующие ветви программы, и машина перед каждым своим 
шагом с вероятностью 1/2 выбирает одну из них в качестве руководства 
к действию. Замечательно, что правильный результат может получаться 
при этом со сколь угодно высокой степенью достоверности. 

Машина Тьюринга (точнее, одноголовочиая машина Тьюринга) — 
это устройство с конечным числом состояний (внутренних состояний 
машины), способное перемещаться по пространству внешней памяти и 
менять записанные в ячейках этого пространства символы конечного 
алфавита. И движения, и замена символов протекают по программе — 
детерминированно для детерминированных (обычных) машин, с привле- 
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чением случая для вероятностных машин, Наиболее простой, но доста- 
точный для осуществления любых алгоритмов вид внешней памяти — ‘ 
конечная в каждый момент, но растущая по мере надобности и разбитая 
на ячейки лента (рабочая лента). Различные виды машин Тьюринга 
различаются между собой способом подачи входной информации, како-' 
вой всегда является некоторое слово,— а именно тем, записывается ли 
это слово на рабочей ленте (для машин Тьюринга без входа и выхода: 
МТБВ) или же на особой входной ленте с возможностью читающего 
устройства считывать это входное слово, причем только слева направо 
( односторонние машины: 1-МТ) или же в обе стороны ( двусторонние 
машины: 2-МТ). Все эти, а также некоторые другие разновидности, воз¬ 
никающие в связи со специальной организацией выхода ( машины Тью¬ 
ринга со входом и выходом: МТВ) подробно разъясняются в § Д.З. 

Мы ограничиваемся функциями, определенными на множестве всех 
слов какого-либо конечного алфавита и принимающими значения О 
или 1, т. ѳ. характеристическими функциями множеств (можно поэтому 
считать, что мы занимаемся распознаванием множеств слов), и такое 
ограничение с точки зрения общности определения несущественно, а с 
точки зрения отбора материала для изложения вполне оправдано. 

В самом деле, это ограничение позволяет изучить эффекты, возникающие _ 
при сопоставлении вероятностных машин с детерминированными, 
в чистом виде, без дополнительных обстоятельств (вызванных, скажем, г 
величиной значения функции). 

Основная цель — изучить, какой выигрыш может быть достигнут ; 
при переходе от вычислений функций на детерминированных машинах 
к вычислению на вероятностных машинах — причем со сколь угодно 
высокой вероятностью (в рассматриваемых нами постановках, как легко 
заметить, увеличение вероятности не меняе? «порядка выигрыша»). 
Естественно спросить, в каких терминах Определяется сам выигрыш.. 
Естественно ответить, что выигрыш определяется как уменьшение меры 
сложности. К вопросу о мере сложности, как известно, возможны два» 
подхода. 

Первый состоит в том, что рассматривается олоуаюсть самого- 
алгоритма — например, объем программы машины Тьюринга, т. е. 
попросту произведение количества внутренних состояний машины на 
количество букв рабочего алфавита (который в общем случае шире, 
нежели алфавит входной). 

Второй сосредотачивает свое внимание на сложности процесса 
вычислений — например, на времени вычислений (временная сложность 
или, короче, время) или на объеме внешней памяти (ленточная слож¬ 
ность или, короче, емкость). 

Насколько известно авторам, современная теория ограничивается 
вторым подходом, не уделяя, к сожалению, никакого внимания первому. 

Можно высказать еще одно сожаление, относящееся ко всей теории 
сложности вычислений — как для вероятностных машин, так и для 
детерминированных. Дело в том, что оценки сложности вычисления (вре¬ 
мени или емкости) носят, как правило, асимптотический характер — 
при том, что время и емкость рассматриваются как функции от длины 
подаваемого иа вход аргумента, и сама эта длина устремляется к бес¬ 
конечности. Выигрыш в сложности, достигаемый при переходе от одних 
(«худших») алгоритмов к другим («лучшим»), тоже оценивается асимпто- - 
тически. Если, скажем, верхняя оценка времени имела порядок я 2 ,, 
где я — длина подаваемого на вход слова, а новая оценка того же вре¬ 
мени (для какой-либо фиксированной задачи) снижена до порядка- 
п *Іп п, то это считается (и не без оснований) большим успехом. Но ведь 
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все эти оценки действуют с мультипликативными константами с и на¬ 
чиная с некоторого п„. Константа с к щ могут быть столь велики, что 
для слов реальной длины прежний (асимптотически худший) алгоритм 
лучше нового (асимптотически лучшего). 

Одним из наиболее замечательных достижений теории является 
теорема Фрейвалда о том, что время порядка я а , нужное для распозна¬ 
вания симметрии слов длины п на детерминированных машинах, мож¬ 
но заменить на пЛпп для вероятностных машин — причем со сколь 
угодно высокой вероятностью 1—е. Но при уменьшении е растут с и п 0 , 
и порядок роста функций с (г) и п„ (е) представляет большой интерес. 
К сожалению, этот вопрос еще не исследован. Отсутствие соответствую¬ 
щих результатов тем более досадно, что вероятностный подход по своей 
природе связан с законом больших чисел, т. е. с большими п. Если 
интересоваться вычислениями с высокой степенью вероятности, то 
можно ожидать, что реальный выигрыш во времени и емкости не будет 
иметь места при малых п. Во всяком случае, определение размера п, 
при котором в принципе возможен выигрыш от применения стохасти¬ 
ческих алгоритмов, представляет важную задачу. 

И, наконец, последнее замечание. Из упоминавшейся статьи [Леу и 
др., 1956] вытекает, что на вероятностных машинах Тьюринга можно 
вычислять те и только те функции, которые вычисляются на детерми¬ 
нированных машинах. Теория показывает, что для некоторых важных 
функций переход от детерминированных машин к вероятностным дает 
значительную экономию вычислительных ресурсов (времени, емкости). 
Остается неизвестным, бывают ли нетривиальные функции, где такой 
экономии получить нельзя (тривиальные, конечно, бывают, например, 
константы). 


§ Д.2. Основные результаты 

Прежде чем перейти к обзору основных результатов теории, сле¬ 
дует сделать одно принципиальное замечание. Сложность — будь то 
время или емкость — вычислений на детерминированных и вероятност¬ 
ных машинах должна (это вызвано существом делаі) пониматься по раз¬ 
ному. Для детерминированной машины — это число шагов или объем 
внешней памяти, затраченные на обработку аргумента вплоть до появ¬ 
ления результата. Но у вероятностной машины сам результат по про¬ 
шествии данного числа шагов или после затраты данного объема памяти 
возникает лишь с той или иной вероятностью. Поэтому сама оценка 
сложности носит вероятностный характер. Суть дела такова (подробнее 
см. § Д.З). Говорят, что машина выдает результат (выход) у для аргу¬ 
мента (входа) х со сложностью (временнбй, ленточной) т и с вероятно¬ 
стью р, если при подаче на вход х, с вероятностью, не меньшей, 
чем р, наступает следующее событие: машина, израсходовав и е более 
чем т «единиц сложности» (шагов, ячеек ленты), останавливается с 
результатом у. Машина вычисляет всюду определенную функцию у= 
—Ф (х) со сложностью т(х) и вероятностью р, если оиа для каждого х„ 
вычисляет ф (х 0 ) со сложностью т (х 0 ) и вероятностью р. Таким образом, 
для вероятностной машины сложность не восстанавливается однознач¬ 
но — даже при фиксированной вероятности р. Если т — сложность и 
т' > т, то т' — тоже сложность (с той же вероятностью р). Речь по¬ 
этому всегда идет о возможности — для данного р > 1/2 — такой ма¬ 
шины и такой сложности, которые обеспечивают вычисление интересую¬ 
щей нас функции. 
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О сложности вычисления конкретных функций мало что известно 
даже для вычислений на детерминированных машинах. Здесь получил 
признание результат Барздиня, полученный в 1963 г. и опубликованный 
в [Барздинь, 1965] о временной сложности распознавания симметрии. 
Требовалось найти время такого рапознавания; иначе говоря, требова¬ 
лось найти время вычисления характеристической функции множества 
всех симметричных слов. Барздинь показал, что это время имеет 
порядок я 2 , где п — длина слова. Это значит, что 

1) существуют такой алгоритм распознавания симметрии на ма¬ 
шине Тьюринга и такая константа с 2 , что для всех слов длины п время 
работы машины ие превосходит с 2 *я 2 (этот факт получить нетрудно); 

2) для любого алгоритма распознавания симметрии найдутся такая 
положительная константа с* и такое натуральное п 0> что для каждого 
я> п а найдется слово длины п, при подаче которого на вход время работы 
будет превосходить с* «я 2 . (Этот факт получить трудно, ои и образует 
основное содержание теоремы Барздиня). 

Одна из теорем Фрейвалда позволяет при переходе от детерминиро¬ 
ванных машин Тьюринга к вероятностным снизить оценку я 2 доя*1пя. 

Теорема [Фрейвалд, 1979]. Для любого в > 0 существует вероят¬ 
ностная машина Тьюринга, которая распознает симметрию слов в алфа¬ 
вите {0, 1} с вероятностью 1—е за время, по порядку равное я-1п я. 

Примечание. Две функции имеют один и тот же порядок , 
если их отношение ограничено сверху и снизу положительными 
конечными константами. Машина, о которой идет речь,— это МТБВ 
(точнее, одноголовочная одноленточная машина без входа и выхода, 
см. § Д.З). 

Метод доказательства сформулированной теоремы имеет философ¬ 
скую глубину. Он назван ее автором методом инвариантов и состоит в 
следующем. Предположим, что задан один объект н другой, относитель¬ 
но которого мы не знаем, тот же это, что и первый, или нет. (Пример; 
первый объект — определенный человек, второй объект — изображение 
на фотоснимке; требуется узнать, является ли это изображение изобра¬ 
жением интересующего нас лица). Можно пытаться так устанавливать 
совпадение или несовпадение объектов: выбрать некоторые просто вы¬ 
числяемые функции и сравнивать между собой значения этих функций 
на этих объектах. Разумеется, для тождественных объектов все соответ¬ 
ственные значения совпадут. Они могут совпасть и для различных объек¬ 
тов, но это маловероятно. (При отождествлении человека с фотоснимком 
в качестве таких функций берут некоторые характерные черепные рас¬ 
стояния.) В процессе доказательства теоремы совпадение или несовпа¬ 
дение двух чисел устанавливается посредством изучения совпадения 
или несовпадения их остатков по некоторому (одному единственному!) 
модулю. Конечно, остатки могут совпасть, а исследуемые числа оказать¬ 
ся раличными, но автор показывает, что при разумной организации 
случайного подбора модуля у различных чисел с высокой веро¬ 
ятностью окажутся различными и остатки. 

, Обсуждаемая теорема (точнее, ее предварительный вариант из [Фрей¬ 
валд, 1975], где вместо 1п я стояло 1п 2 п) представляет собой первую 
(исторически) теорему, где относительно какой бы то ни было конкрет¬ 
ной функции показано, что вероятностные машины вычисляют ее асимп¬ 
тотически быстрее детерминированных. 

Естественно возникает вопрос, нельзя ли порядок я>1п п, найден¬ 
ный для распознавания симметрии на вероятностных машинах, еще 
уменьшить. Отрицательный ответ на этот вопрос дает следующая 
теорема. 
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Теорема ([Фрейвалд, 1975], [Фрейвалд, 1979]). Пусть е<1/2 и пусть 
некоторая вероятностная машина Тьюринга (МТБВ) распознает сим¬ 
метрию слов в алфавите {0, 1} с вероятностью 1—е за время і(х). Тогда 
существует такая константа с>0, что для бесконечно многих х выпол¬ 
няется 


((х) > с-\х I• 1о^ а | х |, где | х | — длина слова х. 

Один из пионеров теории вычислений на вероятностных машинах 
Тьюринга — автор одной из первых теорем на эту тему — Дж. Гилл 
выдвинул (см. [Гилл, 1974] гипотезу, что преимущество во времени 
вычисления вероятностных машин перед детерминированными не может 
сказываться для почти всех (т. е. всех, кроме конечного числа) аргу¬ 
ментов. Ситуация с распознованием симметрии, казалось бы. подтверж¬ 
дает эту гипотезу. Действительно, для бесконечно многих слов — на¬ 
пример, состоящих из одних нулей — никакая вероятностная машина 
не может работать быстрее детерминированной (если, разумеется, рас¬ 
сматривать лишь вычисления с вероятностью, большей, чем 1/2). Однако 
гипотеза Гилла оказывается неверной; это установлено в следующей 
теореме. Язык Р, о котором говорится в теореме, состоит из всех тех 
и только тех слов Р в некотором фиксированном однобуквеином алфа¬ 
вите, для которых найдутся натуральные и и о со следующими свой¬ 
ствами: 1) (Хѵ<и;. 2) длина слова Р равна 2 2 “+о. 

Теорема ([Фрейвалд, 1975], [Фрейвалд, 1979]). (1) Существует ве¬ 
роятностная машина Тьюринга (МТБВ), которая для сколь угодно ма¬ 
лого положительного е с вероятностью 1—8 распознает язык Р за время, 
по порядку равное |х| -Іо^іо^ М, где \х\ — длина распознаваемого 
слова. (2) Для любой детерминированной машины Тьюринга (МТБВ), 
распознающей язык Р , существует такая константа с > 0, что для всех 
х, кроме конечного числа, время работы машины на х не меньше, чем 
с-\х\ -Іо&М. 

Таким образом, бывают функции, для которых преимущество в 
быстродействии вероятностных машин перед детерминированными до¬ 
стигается для почти всех аргументов. 

Следующий результат касается тонкого вопроса: ие вызван ли 
эффект быстродействия вероятностных машин разрешением давать, хотя 
и с малой вероятностью, неправильные результаты или же не давать 
результата вовсе. Оказывается, что иет, не вызван. Давайте ограничимся 
« точными » (по отношению к вычисляемой функции <р) вероятностными 
машинами, а именно машинами со следующими двумя дополнительными 
свойствами: во-первых, машина для каждого аргумента с веротностью 1 
кончает работу с выдачей некоторого результата; во-вторых, если ма¬ 
шина выдала на аргументе х результат у, то у — <р (х). В [Фрейвалд, 
1979а] строится функция <р (всюду определенная на множестве всех слов 
некоторого алфавита и принимающая лишь значения 0 или 1), с тем 
свойством, что никакая детерминированная машина Тью ринга не может 
вычислять ее за время, меиьшеепо порядку, чем \х\*! г >У 1оёІ*Ь где \х\— 
длина слова х. Иными словами, для всякой детерминированной машины 
Тьюринга (МТБВ) найдется такая константа с>0, что для бес конечн ого 
количества слов будет выполнено неравенство і (х)> \х\ 3 ^У 1о§|х|, где 
1(х) — время вычисления функции <р на аргументе х. А затем для этой 
же ф Фрейвалд ом была построена точная вероятностная машина 
(МТБВ) со следующим свойством: для любого х и для любого е>0 
вероятность того, что машина при работе иа х закончит работу за время 
0(|х| -1о§ |х|), превышает 1—8. 
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Таким образом, выявляется главная причина быстродействия 
вероятностных машин по сравиеиию с детерминированными. Эта причи¬ 
на заключается ие в возможности (хотя бы и маловероятной) получения 
неправильного результата, а в том, что для вероятностной машины 
возможны различные реализации ее работы (на одном и том же аргу¬ 
менте); и вероятность того, что среди этих реализаций найдутся срав¬ 
нительно короткие, может быть сделана достаточно высокой. 

Вопрос. Верна ли гипотеза Гилла для точных машин? 

Следующие две теоремы показывают, что переход к вероятностным 
вычислениям приводит к выигрышу не только во времени, но и в про¬ 
странстве, а именно — в ленточной сложности (емкости). В обеих 
теоремах рассматриваются машины Тьюринга с входной лентой: в пер¬ 
вой из них — односторонние машины, во второй — двусторонние. 

Теорема об односторонних машинах ([Фрейвалд, 1981а, п. 5], 
[Фрейвалд, 1983]). Существует такая функция <р из множества слов в 
множество {0, 1}, что 

1) для любого е>0 существует вероятностная односторонняя ма¬ 
шина Тьюринга, вычисляющая <р с вероятностью 1—е и с емкостью 1о§ 2 ]х|, 

2) для любой детерминированной односторонней машины Тьюринга, 
вычисляющей ту же <р, найдется коистаита с>0, такая что для беско¬ 
нечно многих слов х емкость будет превышать о*|х|. 

Оказывается, в этой теореме (разумеется, для Другой <р) вместо [х| 
можно подставить 1 о 2 2 |*|, но нельзя ни для какой <р подставить Іо&Іо&ІхІ. 

Наконец, теорема о двусторонних машинах из [Фрейвалд, 1983] 
оценивает емкость, с которой вычисляется характеристическая функция 
множества слов вида {0”I я }. Это множество нерегулярно, и поэтому на 
детерминированных устройствах емкость не может быть ограниченной. 
Известно, что для детерминированных двусторонних машин Тьюринга 
она имеет порядок 1п л (результат Хартманиса с соавторами, см. [Стирнз, 
Хартманне, Льюис, 1970]). Теорема о двусторонних машинах дает ре¬ 
зультат, который трудно назвать иначе, как поразительным: для веро¬ 
ятностных двусторонних машин емкость вычисления указанной функции 
можно считать константой! (Правда, эта константа растет с повышением 
вероятности того, что правильный результат будет получен с этой ем¬ 
костью.) 


§ Д.З. Формальные определения 

Этот параграф имеет вспомогательный характер. В нем приводятся 
точные определения терминов, используемых в Дополнении. Редакция 
основных определений принадлежит Р. В. Фрейвалду. 

Мы ограничиваемся функциями, определенными на множестве всех 
слов некоторого конечного алфавита и принимающими лишь значения 
0 и 1. Каждая такая функция полностью характеризуется подмножест¬ 
вом слов, на которых ее значение равно 1. Процедуру вычисления такой 
функции можно рассматривать как процедуру распознавания этого 
подмножества. Про слово, на котором функция равна 1, говорят, что оно 
принимается, про слово, на котором функция равна 0,— что оно отвер¬ 
гается. 

В теории распознавания произвольное подмножество множества 
всех слов в каком-либо алфавите (в терминологии этой книги словарное 
множество) принято называть языком. Эту терминологию мы и принима¬ 
ем в данном Дополнении. 
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Детерминированная одноголовочная одноленточная машина Тью¬ 
ринга без входа и выхода — это пятерка (X, 3, 9 т, 95 , />, где 

X — конечный рабочий алфавит (букв на ленте), включающий сим¬ 
вол Л; 

5 — конечный алфавит внутренних состояний', 

9 Т— инициальное состояние (уі^З); 

_ 43 — стоп-состояние (ч$ ^ 5); 

/ — множество инструкций, или команд. Каждая инструкция яв¬ 
ляется цепочкой символов из ХХ$Х{-*}Х$ХХХ {С, Я, Ь]. Первые 
два символа инструкции называются ем левой частью, а последние два 
символа — ее правой частью. Требуется, чтобы для любой цепочки из 
XX в множестве I нашлась одна и только одна инструкция с 

такой левой частью. 

У этой машины имеется одна лента, по которой передвигается одна 
головка. В начале работы на этой ленте написано рассматриваемое слово. 
Лента бесконечна в обе стороны, и все ячейки, не занятые данным сло¬ 
вом, заполнены символами А. Машина начинает работу в состоянии 9 т, 
головка в начале работы расположена на первой с левой стороны букве 
рассматриваемого слова. Пусть на очередном шаге работы машины состоя¬ 
ние равно и головка обозревает букву х^Х. Пусть множество / 
содержит инструкцию ху^у^'/С,. Тогда машина на этом шаге переходит 
в состояние ук>, заменяет букву х на х!, и если Ѣ=Я, то головка дви¬ 
гается на одну ячейку вправо, если І=Ь, то двигается на одну ячейку 
влево, и если Ѣ—с, то остается на месте. Важно отметить, что вычисления 
не обязательно проходят только в той части ленты, которая первона¬ 
чально была занята данным словом. Машина кончает работу, когда 
вырабатывающееся новое внутреннее состояние равно 95 . Данное слово 
принимается, если в момент завершения работы головка обозревает 1 , 
непосредственно слева и справа от которой стоит по букве А. Данное 
слово отвергается, если в момент завершения работы головка обозревает 
букву 0, непосредственно слева и справа от которой стоит по букве А. 

Говорят, что машина распознает язык I., если эта машина прини¬ 
мает все слова из языка Ь и отвергает все слова из дополнения Ь язы¬ 
ка I,. 

Детерминированная одноленточная одноголовочная машина Тью¬ 
ринга с входом и выходом — это шестерка (X, У, 2, 5, 9 т, I), где 

X — конечный входной алфавит (букв на входе), включающий сим¬ 
вол 4^; 

У — конечный рабочий алфавит (букв иа рабочей ленте), включаю¬ 
щий символ А; 

2 — конечный выходной алфавит (букв на выходе), включающий 
символ А; 

5 — конечный алфавит внутренних состояний', 

Ух — инициальное состояние (?і^5); 

I — множество инструкций, или команд. Каждая инструкция яв¬ 
ляется цепочкой символов из ХХУХ5Х {-*-}Х$Х УХ2Х [С, Я, I}. 
Первые три символа инструкции называются ее левой частью, а послед¬ 
ние четыре символа — ее правой частью. Требуется, чтобы для любой 
цепочки из XX УХ 5 в множестве / нашлась одна и только одна ин¬ 
струкция с такой левой частью. 

У этой машины имеется одна бесконечная в обе стороны рабочая 
лента, по которой передвигается одна головка, В начале работы машина . 
находится в состоянии 9 т, на вход поступает первая буква рассматри¬ 
ваемого слова, рабочая лента пуста. Далее, на втором шаге на вход 
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поступает вторая буква слова, на третьем шаге — третья и т. д. После 
поступления на вход последней буквы слова начинают поступать сим¬ 
волы ф. Пусть на очередном шаге работы машины состояние равно 
Ук^З, головка обозревает букву у^У и на вход поступает символ х(^Х. 
Пусть множество / содержит инструкцию хуук ци'У'Л,. Тогда маши¬ 
на на этом шаге переходит в состояние Цк>, заменяет букву у на у', 
выдает на выход г, н если %=Я (?;=/.), то головка двигается иа одну 
ячейку вправо (влево), и если &=с, то остается на месте. Данное слово 
принимается, если первый отличающийся от А символ, выданный ма¬ 
шиной на выход после поступления на вход последней буквы входного 
слова, равен 1. Слово отвергается, если этот символ равен 0. 

Детерминированная односторонняя машина Тьюринга — это 
семерка ( X , У, 3, <д, Р а , Р г , /), где 

X — конечный входной алфавит (букв на входной ленте), вклю¬ 
чающий символ ф; 

У — конечный рабочий алфавит (букв на рабочей ленте), включаю¬ 
щий символ А; 

5 — конечный алфавит внутренних состояний ; 

ді — инициальное состояние (<7і$$); 

Р а — множество принимающих состояний (Р а <^3)-, 

Р Г — множество отвергающих состояний (Р г 9^3); 

I — множество инструкций, или команд. Каждая инструкция яв¬ 
ляется цепочкой символов на ХХУХ5Х {-*-}Х5Х {С, /?}ХУХ{С, 
Я, I), причем, если первый символ инструкции равен ф, то шестой 
символ этой инструкции равен С. Первые три символа инструкции на¬ 
зываются ее левой частью, а последние четыре символа — ее правой 
частью. Требуется, чтобы для любой цепочки из XX УХ (3\(Р а Ц 
П />)) в множестве 1 нашлась одна и только одна инструкция с такой 
левой частью. 

У этой машины имеются две ленты. Одна из них входная, на которой 
написано рассматриваемое входное слово, и другая — рабочая. Не¬ 
посредственно после последней буквы слова на входной ленте написана 
одна буква ф. На каждой ленте расположено по одной головке. Машина 
начинает работу в состоянии Головка входной ленты в начале работы 
расположена на первой букве входного слова. Рабочая лента в начале 
работы пуста, т. е. во всех ее ячейках записаны символы А. Пусть на 
очередном шаге работы машины состояние равно <7*^5, головка вход¬ 
ной ленты обозревает букву х^Х, головка рабочей ленты обозревает 
букву у$У, и пусть множество / содержит инструкцию 
Тогда машина на этом шаге переходит в состояние если Ёі—Я, то 
головка входной ленты двигается по ленте на одну ячейку вправо, а 
если ^і=С, то головка входной ленты остается на месте; вместо буквы у, 
обозреваемой на рабочей ленте, машина печатает букву у', и, если $ 2 =Я, 
то головка рабочей ленты двигается на одну ячейку вправо, если | 2 =/., 
то — влево, и если ? 2 =С, то головка рабочей ленты остается на месте. 
Машина кончает работу, когда вырабатывающееся новое внутреннее 
состояние принадлежит Р а [)Р г . Слово принимается, если это состояние 
принадлежит Р а , и отвергается, если — принадлежит Р Г . 

Детерминированная двусторонняя машина Тьюринга — это семер¬ 
ка (X, У, 3, йі, Р а , Р г , I), где 

X — конечный алфавит (букв на входной ленте), включающий 
символы [? и ф; 

У — конечный входной алфавит (букв на рабочей ленте), включаю¬ 
щий символ А; 

5 — конечный рабочий алфавит внутренних состояний-, , 
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— инициальное состояние (<7і^5); 

Р а — множество принимающих состояний (Р а с=8); 

Р г — множество отвергающих состояний (Р г <=8); 

I — множество инструкций, или команд. Каждая инструкция 
является цепочкой символов из ХХУХ8Х {->-}Х5Х {С, К, Цх 
X КХ {С, #, Ц, причем если первый символ инструкции равен ф, 
то шестой символ этой инструкции принадлежит {С, Ь), а если первый 
символ инструкции равен [>, то шестой символ этой инструкции при¬ 
надлежит {С, /?}. Первые три символа инструкции называются ее 
левой частью, а последние четыре символа — ее правой частью. Тре¬ 
буется, чтобы для любой цепочки из XXУХ (3\(Р а [)Р г )) во множе¬ 
стве / нашлась одна и только одна инструкция с такой левой 
частью. 

У этой машины имеются две ленты. Одна из них входная, на кото¬ 
рой написано рассматриваемое входное слово, и другая — рабочая. 
Непосредственно перед первой буквой входного слова написана одна 
буква \), и непосредственно после его последней буквы написана одна 
буква #. На каждой лейте расположено по одной головке. Машина 
начинает работу в состоянии Ці. Головка входной ленты в начале работы 
расположена на первой букве распознаваемого слова. Рабочая лента в 
начале работы пуста, т. е. во всех ее ячейках записаны символы Л. 
Пусть на очередном шаге работы машины состояние равно я^З, голов¬ 
ка входной ленты обозревает букву х^Х, головка рабочей ленты обоз¬ 
ревает букву у^У, и пусть множество / содержит инструкцию хуц^ -*■ 
-+Як’ХлУь 2 - Тогда машина на этом шаге переходит в состояние 
если (ц=Д, то головка входной ленты двигается по ленте на одну ячейку 
вправо, если то — влево, и, если 2ц=С, то головка входной ленты 
остается на месте; вместо буквы у, обозреваемой на рабочей ленте, ма¬ 
шина печатает букву у', и, если ? 2 — ^ то головка рабочей ленты дви¬ 
гается на одну ячейку вправо, если ? 2 =/<, то — влево, и если ^ 2 =С, 
то головка рабочей ленты остается на месте. Машина кончает работу, 
когда вырабатывающееся новое внутреннее состояние принадлежит 
Р а [)Р г . Слово принимается, если это состояние принадлежит Р а и 
отвергается, если — принадлежит Р г . 

Для всех рассматриваемых нами машин говорят, что машина 
распознает язык Ь, если эта машина принимает все слова из языка Ь 
и отвергает все слова из Ь. 

В Дополнении рассматриваются две различные (наиболее популяр¬ 
ные) меры сложности вычислений на машинах Тьюринга: время работы и 
ленточная сложность (длина использованной части рабочей ленты). 
Поскольку изучение этих мер сложности как функций от входных слов 
затруднительно из-за, вообще говоря, большого разброса их значений, 
обычно изучаются более сглаженные сложностные характеристики «в 
худшем случае». Так, через (х) мы будем обозначать время работы 
машины ЗЛ на слове х, а через ( т (л) будем обозначать максимум ^ (х) 
по всем входным словам х (в данном алфавите), длина которых не пре¬ 
восходит л. Через % (х) будем обозначать число использованных 
ячеек на рабочей ленте, а через (л) — максимум этой величины по 
всем входным словам (в данном алфавите), длина которых не превосхо¬ 
дит л. Все обсуждавшиеся результаты относились только к числовым 
функциям I ш (п) и (л). Так, например, выражение «машина ЗЛ рабо¬ 
тает в линейное время», означает, что существует такое с> 0, что для всех 
л выполняется %(л)<с-л. 
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ДОПОЛНЕНИЕ. ВЕРОЯТНОСТНЫЕ АЛГОРИТМЫ 


Часто рассматривают и одно специфическое ограничение времени 
работы машин. Это работа в реальное время. При такой работе машины в 
каждый момент на вход поступает очередная буква входного слова, и на 
выход подается ответ, принадлежит или не принадлежит распознавае¬ 
мому языку слово, поступившее на вход до сих пор. 

Пусть Щ — один из типов машин, рассмотренных в этом параграфе. 

Определение вероятностной 91-машины отличается от определения 
детерминированной 91-машины тем, что в левой части инструкций 
появляется еще один символ — выходное значение датчика случайных 
чисел с конечным алфавитом, который на каждом шаге работы выдает 
свои выходные значения равновероятно и независимо от значений, вы¬ 
данных на других шагах. Требование, чтобы для каждой возможной 
левой части инструкции (дополненной теперь еще одним символом) во 
множестве / нашлась одна и только одна инструкция с такой левой 
частью, сохраняется. 

Реализацией работы вероятностной 91-машнны называется последо¬ 
вательность выполненных инструкций. 

Для каждой заканчивающейся реализации работы вероятностной 
91-машины можно подсчитать вероятность этой реализации. Вероят¬ 
ность результата у при работе машины ЯЛ на х — это сумма вероятно¬ 
стей тех реализаций работы ЯЛ на х, при которых вырабатывается ре¬ 
зультат у. Вероятность результата у за время / (х) (соответственно, с 
ленточной сложностью § (х)) при работе машины ЯЛ иа х — это сумма 
вероятностей тех реализаций работы ЯЛ на х, при которых время работы 
не превышает / ( х) (соответственно ленточная сложность не превышает 
§(*))• 

Будем говорить, что вероятностная 91-машина ЯЛ распознает язык Ь 
с вероятностью р, если ЯЛ при работе иа любом х с вероятностью, не 
меньшей чем р, выдает результат 


Сь (х) = | 


1, если 
О, если х^Б. 


Будем говорить, что вероятностная 91-машина ЯЛ распознает язык Ь 
е изолированной точкой сечения, если существует такое число р> 1/2, 
что ЯЛ распознает і с вероятностью р. 

Будем говорить, что вероятностная 91-машина ЯЛ распознает язык 
Ь за время/(х) с вероятностью р, если ЯЛ при работе на любом х с веро¬ 
ятностью, не меньшей чем р, останавливается не позже чем за время 
І(х) с результатом Сі (х). 

Будем говорить, что вероятностная 91-машина ЯЛ распознает язык 
Ь за время і(х) с изолированной точкой сечения, если существует такое 
число р> 1 /2, что ЯЛ распознает язык Б за время /(х) с вероятностью 
р. 

Будем говорить, что вероятностная 91-машина ЯЛ распознает язык 
Б с ленточной сложностью р(х) с вероятностью р, если ЯЛ при работе 
на любом х с вероятностью, не меньшей чем р, останавливается, израс¬ 
ходовав не больше чем р(х) ячеек рабочей ленты, с результатом С/,(х). 

Будем говорить, что вероятностная 91-машина ЯЛ распознает язык 
Ь с ленточной сложностью р(х) с изолированной точкой сечения, если 
существует такое число р> 1/2, что ЯЛ распознает Б с ленточной слож¬ 
ностью ц(х) о вероятностью р. 

Определение недетерминированной 91-машины получается из опре¬ 
деления детерминированной 91-машины отбрасыванием требования, 
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чтобы для каждой возможной левой части инструкции множество / 
содержало одну и только одну инструкцию с такой левой частью. 

Реализацией работы недетерминированной 31-машииы называется 
последовательность выполненных инструкций. 

Недетерминированная 31-машина ЙЛ принимает данное слово х, 
если существует такая реализация работы ЙЛ на х, которая заканчивает- 
ся результатом 1. 

Недетерминированная 31-машина ЙЛ отвергает данное слово, если 
существует такая реализация работы ЙЛ на х, которая заканчива¬ 
ется результатом 0. 

Недетерминированная 31-машина ЙЛ принимает язык Ь, если она 
принимает все слова из Ь и только эти слова. 

Недетерминированная 31-машина ЙЛ распознает язык Ь, если оиа 
принимает все слова из Ь, отвергает все слова из Ь, и ие существует 
такого слова, которое ЙЛ при одной реализации принимает, а при дру¬ 
гой — отвергает. 

Недетерминированная 31-машина ЙЛ принимает язык Ь ва время 
Дх), если для любого слова х$Ь существует реализация работы ЙЛ на 
х, которая приводит к результату 1 за число шагов, не большее 
чем Дх), и ни для какого х^Ь не существует реализаций работы ЙЛ на 
х, которые приводили бы к результату 1. 

Недетерминированная ЗІ-машнна ЙЛ распознает язык Ь за время 
Дх), если для любого слова х существует реализация работы ЗЛ на х, 
которая приводит к результату Сі (х) за число шагов, ие большее чем 
Дх), и ни для какого х не существует реализаций работы ЙЛ на х, кото¬ 
рые приводили бы к результату, отличному от Сі(х). 
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Ансамбль 25, 136 

— Б-слов 25 

-расширенный 26 

— (Б, 6) -деревьев 26 
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дом 239 

— односторонняя машина Тью¬ 
ринга 234 
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Инвариантная теория сложности 
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Инверсивное исчисление 153 
Инициальное состояние 239, 240, 
241 

Инструкция 239, 240, 241 
Интерпретатор ПО 
Информации теория 216 
Информационное устройство 141 
Исчисление 44 

— ассоциативное 50, 54 

— инверсивное 153 

— каноническое 62 

— колмогоровского типа 50 

— нормальное 62 

— однопосылочное 46 

— с локальным преобразованием 
информации 50 

— со входом 52 

— универсальное 119 

— й-посылочное 46 
Исчислительиая операция 52 
Исчислительный процесс 46 


Каноническая система 62 
Каноническое исчисление 62 
Категория нумерованных мно¬ 
жеств 132 

Квазистандартная нумерация 186 
Квазитождество 60 
Количество информации 215 
Колмогорова машина 33, 35 
Колмогорова — Успенского ал¬ 
горитм 36 

Колмогорова — Шёнхаге алго¬ 
ритм 36 

Колмогоровский Б-ансамбль 26 

— Б-комплекс 23 

— комплекс 22 

-над алфавитом Б 23 

— размер 194 

Колмогоровских Б-комплексов 
ансамбль 26 

Колмогоровского типа вычисли¬ 
тельная модель 32 

- исчисление 50 

Колмогоровское /--локальное 
Б-действие 28 
Команда 239, 240, 241 
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Комплекс колмогоровский 22 
Конечноавтоматиая породимость 
93 

— разрешимость 93 
Конечнозаданная алгебраическая 

система 61 

Конечноопределенная алгебраи¬ 
ческая система 58 
Конечный объект 20 
Конструируемая по времени функ¬ 
ция 82 

— по емкости функция 82 
Коиструктивизация 187 

— сильная 187 

Конструктивизируемая алгебраи¬ 
ческая система 187 

— модель 196 

Коиструктивизируемость'' силь¬ 
ная 187 

Конструктивная алгебраическая 
система 187 

— модель 196 

— нумерация 187 

— семантика 165 
Конструктивное метрическое про¬ 
странство 179 

— направление в математике 165 

— определение 169 
Конструктивный анализ 175 

— континуум 178 

— носитель меры 183 

— объект 20 

— ординал 184 
Континуум вычислимый 177 

— конструктивный 178 
Конфигурация 32 

— полная 32 
Корень (о дереве) 19 
Корневое дерево 19 
Кортеж 26 

Кортежное распространение ну¬ 
мерации 133 

Креативное множество 96 


Лента 67, 239 

— входная 240, 241 

— рабочая 234, 239, 240, 241 
Линейное время 84, 241 
Логика задач 166 

— математическая 169 

— символическая 169 
Логистика 169 
Логистическая система 45 


Локальная операция 35 
Локальное действие 22, 27 
— свойство 21, 27 
Локальности показатель 22 


Майхилла теорема 96 
Мальцевский размер 194 
Марковское инвариантное свойст¬ 
во 159 

Мартин-Лёфа теорема 183 
Массовая щюблема 146 

- алгебраически корректная 

190 

- алгоритмическая 148 

-в смысле Медведева 163 

-отделимости 147 

-разрешимости 147 

Математическая логика 169 
Машина вероятностная 233 
- «точная» 237 

— Колмогорова 33, 35 
- ориентироианная 36 

— недетерминированная 242 

— с модифицируемой памятью 36 

— Тьюринга 66, 233 

-без входа и выхода 234 

-двусторонняя 234 

-детерминированная дву¬ 
сторонняя 240 

-одноголовочиая, одно¬ 
ленточная, без входа и выхода 
239 

-со входом н вы¬ 
ходом 239 

-односторонняя 240 

- многоленточная 67 

- одноленточная 67 

-односторонняя 234 

-со входом и выходом 234 

— Шёнхаге 36, 42 
Машинно-независимая теория 

сложности 133 
Медведева решетка 105 
Мера бернуллиева 200 

— вычислимая 200 

— равномерная бернуллиева 200 

— сложности 134 
Метод инвариантов 236 

— Моите-Карло 214, 232 

— приоритета 94 

— программирования 1)3 

— статистических испытаний 232 
Метрическая теория алгоритмов 15 
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Многоленточная машина Тьюрин¬ 
га 67 

Множества неотделимые 172 
Множество арифметическое 89 

— диофантово89 

— занумерованное 132 

— креативное 96 

— натурально (за)иумероваииое 
132 

— неразрешимое породимое 91 

— номерное 122 

— нумерованное 132 

— перечислимое 81 

— полиномиальное 89 

— полное 95 

— породимое 78 

— простое 96 

— разрешимое 78 

— распознаваемое 65, 78 

— результатное 119 

— словарное 12 

— числовое 12, 80 

— аффективно открытое 181 

-пренебрежимое 182 

Модели арифметики 197 
Моделирование в реальное время 

77 

Модель вычислительная 17 

— — колмогоровского типа 32 

— — представительная 34, 39 
-с локальным преобразова¬ 
нием информации 32 

-- удобная 141 

— -чг X — /-представительная 
40 

— порождающая представитель¬ 
ная 62 

— — /-представительная 62 

— (для мнотства формул) кон- 
структивизируемая 196 

— конструктивная 196 

— сильно конструктивизируемая 
196 

-конструктивная 196 

Монотонная энтропия 137 
Монте-Карло метод 214, 232 
Морфизм 132 
Мучника решетка 105 

— теорема 115 


Натуральная нумерация 122 
Натурально (за) нумерованное 
множество 132 


Натуральный ряд И 
Недетерминированная машина 242 
Недетерминированный алгоритм 
64 

Неопровержимая формула 167 
Неотделимые множества 172 
Непосредственной переработки 
оператор 35 

Неразрешимое породимое мно¬ 
жество 91 

Нерелятивизуемое свойство 116 
Нижняя оценка 223 
Номер 122 

Номерное множество 122 
Норма 74 

Нормальная система 62 
Нормальное исчисление 62 
Нормированный ансамбль 75 
Нормированных ансамблей изо¬ 
морфизм 75 

Носитель меры конструктивный 
183 

Нульпосылочное правило 47 
Нумерации автоэквивалентиые 
193 

— изоморфные 123 

— проблемно эквивалентные 191 

— программно эквивалентные 193 

— равномерно эквивалентные 193 

— эквивалентные по Колмогоро¬ 
ву 125, 193 

-по Мальцеву 193 

Нумераций сводимость 125 

— теория 122 
Нумерация 122, 123 

— без повторений 122 

— вычислимая 126, 127, 128 

— гёделева 127, 128 

— главная 127, 128 

— квазистандартная 186 

— конструктивная 187 

— натуральная 122 

— однозначная 122 

— оптимальная 127, 128 

— позитивная 124 

— полиномиально геделева 129 
- главная 129 

— программного типа 185 

— простая 122 

— разрешимая 122 

— стандартная 124 

— тотальная 123 

— числовая 122 

— шноррова 127, 128 
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Нумерация экономная по объему 
номеров 127, 128 
Нумерованная алгебраическая си¬ 
стема 187 
— структура 184 
Нумерованное множество 132 


О линейном ускорении теорема 84 
О неподвижной точке теорема 104 
Об иерархии теорема 83 
Об ускорении теорема 135 
Область определения 34 

— применимости 34 

Общая проблема гомеоморфии 161 
формулировка теоремы Мар- 
тин-Лёфа 183 
Общезначимость 170 
Объект допустимый 47 

— конечный 20 

— конструктивный 20 
Объем 137 

Ограниченно-искажающее отобра¬ 
жение 75 

Однозначная нумерация 122 
Однолеиточная машина Тбюриига 
67 

Однопосылочное исчисление 46 
Односторонняя машина Тьюринга 
234 

Оператор вычислимый 103 

— непосредственной переработки 
35 

— перечисления 102 

— рекурсивный 103 

— частичнорекурсивный 103 
Операционная алгебраическая си¬ 
стема 56 

Операция вычислимая 102 

— исчислительная 52 

— локальная 35 
Описание 136 

Определение конструктивное 169 

— случайной последовательности 

198 

— случайности по Колмогорову 
208 

-по Мартин-Лёфу 210 

-по Мизесу — Кнуту 205 

-по Мизесу — Колмогоро¬ 
ву— Лавлэнду 205 

-по Мизесу — Чёрчу 204 

Оптимальная нумерация 127, 128 


Оптимальная функция 118 
Оптимальный способ описания 137 
Ординал конструктивный ІЙ 
Ориентированная машина Колмо¬ 
горова 36 

Основание нумерации 122 
Основной элемент 48 
Отвергаться (о слове) 239, 240, 
241 

Отвергающее состояние 240, 241 
Отделения проблема 147 
Отделимости проблема 147 
Отделяющая функция 147 
Относительная проблема распоз¬ 
навания равенства 157 
Относительный алгоритм 98 
Отношение арифметическое 89 

— диофантово 89 

— полиномиальное 89 

— согласованности 136 
Отображение ограниченно-иска¬ 
жающее 75 

Отчасти вычислимый анализ 181 
Оценка верхняя 220 

— нижняя 223 


Параметрическая проблема 169 
Первая теорема о рекурсии 104 
Перечисления оператор 102 

— проблема 164 
Перечислимая степень 97 
Перечислимое множество 81 
Позитивная нумерация 124 
Показатель локальности 22 
Полиномиально гёделева нумера¬ 
ция 129 

— главная нумерация 129 
Полиномиальное множество 89 

— отношение 89 
Полиномиальный терм 89 
Полная конфигурация 32 
Полное множество 95 

— состояние 32 
Полусистема Туэ 55 
Породимое множество 78 
Породимость конечноавтоматиая 

93 

Порождаться исчислением (об 
объекте, множестве) 48 
Порождающее правило 45 
Порождающий процесс 46 
Порожденная сигнатурой сг алгеб¬ 
раическая система 57 
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Порожденная сигнатурой и задан¬ 
ная совокупностью равенств 
5 алгебраическая система 
58 

Порядок роста функции 236 
Последовательность вычислимо 
сходящаяся 176 
-фундаментальная 176 

— регулярно сходящаяся 176 

— случайная 198 

-по Колмогорову 208 

-по Мартин-Лёфу 210 

-по Мизесу — Киуту 205 

-по Мизесу — Колмогоро¬ 
ву — Лавлэнду 205 

-по Мизесу — Чёрчу 204 

Поста тезис 63 
Посылка 46 
Правило выбора 201 
-допустимое 201 

— вывода 45 

— выделения основных состоя¬ 
ний 48 

— извлечения результата 40, 48 

— начала 39 

«— нульпосылочное 47. 

— порождающее 45 

— разрешительное 45 
Предикатное имя 56 
Предметное имя 56 
Представимости матриц проблема 

153 

Представительная вычислитель¬ 
ная модель 34, 39 

— порождающая модель 62 
Представительный класс алгорит¬ 
мов 34 

- исчислений 62 

Префиксная энтропия 138 
Приведенный терм 157 
Пример Шпекера 178 
Принимать (язык) 243 

— за время 243 

Приниматься (о слове) 241, 243 
Принимающее состояние 240, 241 
Проблема алгебраически коррект¬ 
ная 190 

— алгоритмическая 146 

— Гильберта, десятая 154 

— гомеоморфии общая 161 
- частная 161 

— достижимости 162 

— массовая см. Массовая пробле¬ 
ма 

— отделения 147 


Проблема отделимости 147 

— параметрическая 169 

-эффективно опровержимая • 

169 

— перечисления 164 

— представимости матриц 153' 

— продолжения 147 

— разрешения 147 
- семантическая 170 

— разрешимости 147 

— распознавания истинности фор¬ 
мул 151 

-равенства абсолютная 157 

-- — относительная 157 

— решимая 12, 146 

— сводимости Поста 94 

— сочетаемости Поста 151 

— тождества элементарных функ¬ 
ций 154 

— эквивалентности слов 151 
Проблемная сводимость 192 . 

— эквивалентность 193 
Проблемное различие 191 
Проблемный размер 194 
Программа 108 

— вычислимого действительного 
числа 177 

— функции 113 

Программирование исчислений 
119 

Программирования метод 113 
Программная сводимость 192 

— эквивалентность 193 
Программного типа нумерация 185 
Программное устройство 142 
Программный ансамбль 108 

— размер 194 

Продолжения проблема 147 
Простая колмогоровская энтро¬ 
пия 137 

— нумерация 122 
Простое множество 96 
Пространство метрическое конст¬ 
руктивное 179 

-рекурсивное 180 

— эффективно метризуемое 181 
- метрическое 179 

-топологическое 180 

Процедура приведения 157 
Прямое произведение нумераций 
133 


Рабочая среда 47 
Рабочий алфавит 239, 240 
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Равенство сигнатуры 57 
Равномерная бернуллиева мера 
200 

— сводимость 192 

— эквивалентность 193 
Равномерный размер 194 
Радиус активной части 22 
Различие проблемное 191 
Размер алгоритмический см. Ал¬ 
горитмический размер 

Разрешающий алгоритм 78 
Разрешения проблема 147 
Разрешимая нумерация 122 
Разрешимое множество 78 

-относительно нумерации 

132 

Разрешимости проблема 147 
Разрешимость конечноавтомат¬ 
ная 93 

Разрешительное правило 45 
Распознаваемое множество 65] 78 
Распознавания истинности фор¬ 
мул проблема 151 
Распознавать (язык) 239, 241 

— за время с вероятностью 242 
- с изолированной точкой 

сечения 242 

— с вероятностью 242 

— с изолированной точкой сече¬ 
ния 242 

— с ленточной сложностью с ве¬ 
роятностью 242 

-с изолированной точ¬ 
кой сечения 242 

Распределение вероятностей вы¬ 
числимое 200 

Расширенный ансамбль Б-слов 26 
Реализация 242, 243 
Реализуемая формула 167 
Реализуемость по Клини 166 
Реальное время 242 
Регулярно сходящаяся последо¬ 
вательность 176 
Регулятор непрерывности 179 

— сходимости в себе 176 

— фундаментальности 176 
Результат 48 

Результатная функция 110 
Результатное множество 119 
Рекурсивная алгебраическая си¬ 
стема 187 

— сепарабельность 180 
Рекурсивное метрическое прост¬ 
ранство 180 

Рекурсивный оператор 103 


Релятивизация 100 
Релятивизуемо истинное свойство 
116 

т- ложное свойство 116 
Реляционная алгебраическая си¬ 
стема 56 

Решение проблемы 146 
Решетка Медведева 105 
— Мучника 105 
Решимая проблема 12, 146 
Роджерса теорема 129 


Свободная алгебраическая систе¬ 
ма, порожденная сигнатурой 
а 57 

Сводимости проблема Поста 94 
Сводимость массовых проблем в 
смысле Медведева 164 

— множеств за полиномиальное 
время 101 

-по разрешимости 95, 101 

-по Тьюрингу 95, 101 

— нумераций 125 

-по Колмогорову 125, 192 

- проблемная 192 

-программная 192 

- равномерная 192 

— проблем разрешения 95 

— совокупностей множеств по 
Медведеву 105 

-по Мучнику 105 

- сильная 105 

- слабая 105 

Свойство «внешнее» 158 

— «внутреннее» 158 

— инвариантное 159 

— локальное 21, 27 

— марковское 159 

— нерелятивизуемое 116 

— релятивизуемо истинное 116 
-ложное 116 

— «[эффективной гёделевости». 171 

— /--локальное 27 

Семантика конструктивная 165 
Сема нтическая проблема разре¬ 
шения 170 

Семантическое следствие 57, 60 
Сепарабельность 180 

— рекурсивная 180 

— эффективная 180 
Сигнатура 19, 56 

Сильная конструктивизация 187 

— конструктивизируемость 187 
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Сильная сводимость 105 

— степень трудности 105 
Сильно конструктнвизируемая 

модель 196 

— конструктивная алгебраиче¬ 
ская система 187 

Символическая логика 169 
Система алгебраическая см. Ал¬ 
гебраическая система 

— дедуктивная 44 

— каноническая 62 

— логистическая 45 

— нормальная 62 

— обозначений для ординалов 184 
Ситуация 32 

Слабая полнота 180 

— сводимость 105 

— степень трудности 105 
Следствие семантическое 57, 60 
Слов эквивалентность 54 
Словарная функция 12 
Словарное множество 12 
Словарный ансамбль 25 
Слово в Б 18 

— двоичное 11 
Сложиостной класс 134 
Сложность вычислений 65 

- временная 234 

- ленточная 234, 242 

— конструктивного объекта 137 
- условная 139 

— порождения 76 

Случайная последовательность 
198 

-количественный подход 199, 

209 

-сложиостной подход 199, 

208 

-теоретико-мерный подход 

199, 209 

-частотный подход 199, 200 

Случайность по Колмогорову 208 

— по Мартии-Лёфу 210 

— по Мизесу — Киуту 205 

— по Мизесу — Колмогорову — 
Лавлэнду 205 

— по Мизесу — Чёрчу 204 
Смешанное вычисление 227 
Состояние 32 

— внутреннее 32» 239, 240, 241 

— инициальное 239, 240, 241 

— отвергающее 240, 241 

— полное 32 

— принимающее 240, 241 
Способ описания 136 


Способ описания оптимальный 
137 

— программирования 106, 113 

-вычислимых функций 113 

Стандартная нумерация 124 
Статистических испытаний метод 

232 

Степень неразрешимости 97 

-перечислимая 97 

-Тьюрингова 97 

— трудности 105 

■-сильная 105 

- слабая 105 

Стоп-состояние 239 
Стохастический алгоритм 231 
Структура вычислительная 115 

— нумерованная 184 
Сужение нумерации 133 
Схема программ 104 

— Янова 104 


Тезис Поста 63 

— Чёрча 41 

Тенненбаума теорема 197 
Теорема Бореля — Цейтииа 179 

— Гёделя о неполноте 51, 171 
--о полноте 51, 171 

— Ершова о ядре 189 

— Майхилла 96 

— Мартин-Лёфа 183 

-общая формулировка 183 

— Мучника 115 

— о линейном ускорении 84 

— о неподвижной точке 104 

— о рекурсивной связи различ¬ 
ных мер сложности 134 

— о рекурсии, вторая 120 
- первая 104 

— об иерархии 83 

— об ускорении 135 

— Роджерса 129 

— Тенненбаума 197 

— Цейтина — Московакиса 179 

— Шнорра 129 

— а — т — п 112 

Теория алгоритмов дескриптив¬ 
ная 15 

- метрическая 15 

— информации 216 

- алгоритмическая 215 

— нумераций 122 

— сложности инвариантная 133 

-машинно-независимая 133 

Терм 60 
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Терм арифметический 89 

— замкнутый 56 

— полиномиальный 89 

— приведенный 157 
Тест 210 

Тождества элементарных функ¬ 
ций проблема 154 
Тождество 59 
Тотальная нумерация 123 
«Точная» вероятностная машина 
237 

Транслятор 111 
Трансляция 111 
Трансформация 201 

— допустимая 208 
Тьюринга машина 66,- 233 
Тьюриигова сводимость 95 

— степень 97 

-неразрешимости 97 


Удобная вычислительная модель 
141 

Универсальная функция 112 
-для X, У с индексным мно¬ 
жеством Е 112 

Универсальный алгоритм ПО 
Управляющее устройство 141 
Условная сложность конструк¬ 
тивного объекта 139 

— энтропия 139, 217 
Устойчивое подмножество 190 
Устройство информационное 141 

— программное 142 

— управляющее 141 


Факторизация нумераций 133 
Фактор-нумерация 133 
Формальное задание 37, 63 
Формула атомная 60 

— замкнутая атомная 57 

— неопровержимая 167 

— реализуемая 167 
Функционал частичиорекурсив- 

ный 103 

Функциональное имя 56 
Функция вычислимая 78 

-за линейное время 84 

-относительно нумерации 132 

-отчасти вычислимого ана¬ 
лиза 182 

— вычислительная 109 


Функция гёделева 112 

— главная 112 

-для Х,У с индексным мно¬ 
жеством Е 112 

— конструируемая по времени 82 
-по емкости 82 

— оптимальная 118 

— отделяющая 147 

— результатная ПО 

— словарная 12 

— универсальная 112 

-для X, У с индексным мно¬ 
жеством Е 112 

— числовая 12, 80 

— экономная по норме 118 

— [і-рекурсивная 87 


Цейтина — Московакиса теорема 
179 


Частичнорекурсивиый оператор 
103 

— функционал 103 

Частная проблема гомеоморфии 
161 

Чёрча тезис 41 
Числовая нумерация 122 

— функция 12, 80 
Числовое множество 12, 80 


Шенноновская сложность слова 
219 

— удельная энтропия 219 
Шёнхаге машина 36, 42 
Шнорра теорема 129 
Шноррова нумерация 127, 128 
Шпекера пример 178 


Эквивалентности слов проблема 
151 

Эквивалентность алгоритмов 34 
— нумераций 125 
-относительно колмогоров¬ 
ской сводимости 125 

-по Колмогорову 125, 193 

-по Мальцеву 193 

- проблемная 191 
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Эквивалентность нумераций про¬ 
граммная 193 
- равномерная 193 

— слов 54 

Экономная по норме функция 
118 

— по объему номеров нумерация 
127, 128 

Элемент вспомогательный 48 

— основной 48 
Энтропия 137 

— монотонная 138 

— префиксная 138 

— простая колмогоровская 137 

— разрешения 137 

— с ограничениями на сложность 
вычислений 139 

— условная 139, 217 

— шенноновская удельная 219 
Эффективная почти полнота 180 

— сепарабельность 180 
Эффективно метризуемое прост¬ 
ранство 181 

— метрическое пространство 179 

— опровержимая параметриче¬ 
ская проблема 169 

— открытое множество 181 

— пренебрежимое множество 182 


Эффективно топологическое про¬ 
странство 180 

«Эффективной гёделевости» свой¬ 
ство 171 


Язык 238 

— арифметики 170 

— предикатный 169 

— теории множеств 170 
Языки программирования 41 
Янова схема 104 


^-посылочное исчисление 46 
п-местное имя 56 
г-локальное действие 27 
— свойство 27 
/•-окрестность 27 
в — т — п -теорема 112 
7’-степень 97 
X — У -алгоритм 34 
X — К-представительная модель 
40 

У-представительная модель 62 
Д-структура 42 
р-рекурсивная функция 87 
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